Нам интересны следующие темы

Если ваша тема не подпадает ни под один из пунктов, мы все равно ее рассмотрим.

• Data Processing

  • Flink.
  • Kafka.
  • Beam.
  • Pulsar.
  • Samza.
  • RedPanda.
  • Spark.
  • Hadoop MapReduce.
  • Sqoop.
  • NiFi.
  • Анализ производительности и оптимизация.
  • CDC.
  • Airbyte, DBT, Meltano.
• СУБД и хранилища для больших данных

  • Hive, Impala, Vertica, ClickHouse, Cassandra, ScyllaDB, Druid, Pinot.
  • Teradata, Redshift, GreenPlum, Exadata, BigQuery.
  • MSSQL, PostgreSQL.
  • MongoDB, DynamoDB.
  • S3, ADLS, GCS, HDFS.
  • YDB.
  • Dremio, Presto, Trino.
• Архитектура дата-платформ

  • Моделирование данных.
  • Примеры построения корпоративных хранилищ данных.
  • Оперативная аналитика.
  • Ad-hoc Reporting.
  • Hadoop.
  • Open Table Formats.
• Data Governance

  • Безопасность данных.
  • Data Quality.
  • Data Mesh.
  • Метаданные и управление каталогом.
  • Управление основными данными.
  • Миграция данных.
• MLOps

  • Инструменты оркестрации (Airflow, Dagster, Prefect, Metaflow, Kubeflow Pipelines).
  • Построение собственных Feature Stores, внедрение open source (Feast, Feathr, Hopsworks), опыт использования вендоров (Tecton, Sagemaker, DataBricks, etc.).
  • Разработка собственных ML платформ, внедрение open source (Kubeflow, etc), опыт использования готовых (Sagemaker, Vertex AI, DataBrics, etc.).
  • Experiment Tracking (Mlflow, Neptune Ai, Weight and Biases, etc.).
  • CI/CD для пайплайнов данных.
• Cloud Solutions

  • Snowflake.
  • Databricks.
  • AWS, GCP, Azure.
  • Яндекс Облако, VK Cloud Solutions, SberCloud.
• Другое

  • Дата-инженерия не для дата-инженеров.
  • Тестирование.