Kusto (Azure Data Explorer): Architecture and internals

Kusto — это новая и стремительно набирающая обороты платформа для работы с Big Data. Несколько лет назад она завоевала весь Майкрософт и сейчас Kusto используют буквально все сервисы Azure для анализа данных.

Данный доклад — это рассказ о принципах построения с нуля новой базы данных для работы с логами и телеметрией. Мы затронем особенности запросов на структурированные и неструктурированные данные, подход и технику масштабирования, оптимизацию запросов, а также оптимальное использование базовых сервисов Azure для реализации нетривиального облачного сервиса.