Apache Flink на примере задачи дедупликации

Спикер расскажет о фреймворке потоковой обработки данных Apache Flink. Вы узнаете об архитектуре и основных компонентах Flink на примере дедупликации потока событий.

Основная тема — обсуждение проблем, с которыми можно столкнуться при первом опыте написания Flink-задач, их длительной поддержке на проде, а также при увеличении нагрузки на приложение. Будут затронуты подходы к написанию кода на примере языка Java, механизмы обеспечения High Availability, процессы сериализации и другие внутренние процессы.