Смотреть запись
Петр Островский
Компания: Wildberries
Уже 6 лет работает «всем», что связано с Big Data.
Сейчас работает над тем, чтобы команда из 40 дата-сайентистов могла эффективно использовать modern data stack и решать задачи по обработке данных с источников с нагрузкой до 500 000 RPS.
До этого в аутсорсе завершил 6 различных дата-проектов — от реализации потоков инференса моделей на Spark Streaming до геофиксации маршрутов всех такси, включая агрегацию координат и сессионное деление маршрутов для GP PostGIS. После занимался поддержкой и развитием DWH с использованием сложной потоковой обработки на базе Java, Elastic, Scylla и Spark. Затем — DWH на Vertica и реализацией Kafka Topic as a Service.