Сжатие, шифрование и не только: меняем поведение и гарантии распределенной базы данных

В Apache Ignite уже был механизм сжатия данных, эффективный и востребованный, но неприменимый для ряда кастомеров.

Доработка оригинального механизма под новые требования оказалась невозможной, и мы реализовали новый. При использовании тех же алгоритмов сжатия, но изменив точку их приложения, мы получили новые гарантии и даже ускорили базу данных.

Разберем оригинальный подход к сжатию данных в Apache Ignite и причины по которым пришлось разработать новый. Сравним оба варианта между собой и с родственным механизмом шифрования данных. Проговорим какими еще могли быть варианты исполнения механизма сжатия и почему они не были реализованы. Проследим путь данных в распределенной БД и оценим влияние трансформации на гарантии и производительность.