Хранение

Apache Iceberg в S3

Данные таблиц в Tengri хранятся в кластере S3 в открытом формате Apache Iceberg.

  • Iceberg поддерживает операции INSERT, UPDATE и DELETE, а также изменение схемы таблиц.

  • Iceberg поддерживает ACID — набор требований к транзакционной системе, обеспечивающий наиболее надёжную и предсказуемую её работу.

  • Iceberg-структура формируется на основе формата Parquet с поколоночной компрессией данных.

  • Iceberg — это тысячи успешных внедрений крупнейшими мировыми компаниями для работы с сотнями ТБ и десятками ПБ данных.

Колоночный формат хранения

Благодаря использованию формата Parquet в Tengri поддерживаются:

Колоночный формат хранения данных

OLAP-запросы работают быстрее за счет чтения только нужных колонок таблиц.

Поколоночная компрессия данных

OLAP-запросы работают быстрее в 5 и более раз благодаря сжатию данных таблиц.