Руководство. Delta Lake и Delta Engine

Delta Lake представляет собой уровень хранилища с открытым кодом для повышения надежности озер данных. Delta Lake поддерживает транзакции ACID и масштабируемую обработку метаданных, а также позволяет объединить обработку потоковых данных и пакетную обработку. Delta Lake работает на базе существующего озера данных и полностью совместим со всеми API Apache Spark. Delta Lake в Azure Databricks позволяет настроить Delta Lake на основе шаблонов рабочих нагрузок.

В состав Azure Databricks также входит обработчик Delta Engine, который предоставляет оптимизированные макеты и индексы для быстрых интерактивных запросов.

В этом руководстве показано, как работать с Delta Lake в Azure Databricks и Delta Engine.