Облегченные кирпичи

«Источники данных» — это упакованная среда выполнения Apache Spark с открытым исходным кодом. Она дает возможность выполнять задания, которым не требуется большая производительность, надежность и автоматическое масштабирование, предоставляемые Databricks Runtime. В частности, источник «кирпичи» не поддерживает:

  • Delta Lake
  • Функции авторазвертывания, такие как Автомасштабирование
  • Высокопараллельные кластеры всех целей
  • Записные книжки, панели мониторинга и функции совместной работы
  • Соединители для различных источников данных и средств бизнес-аналитики

«Освещение» — это среда выполнения для заданий (или «автоматизированных рабочих нагрузок»). При выполнении заданий на кластерах "легкие" кластеры подвергаются более низким ценам на вычисления. При создании или планировании задания JAR, Python или Spark-Submit , а также присоединении кластера к этому заданию можно выбрать пункт кирпичы блоков. для запуска заданий записной книжки или интерактивных рабочих нагрузок нельзя использовать "облегченные" кирпичы.

Источник «освещение» можно использовать в той же рабочей области с кластерами, работающими на других средах выполнения и ценовых категориях. Вам не нужно запрашивать отдельную рабочую область, чтобы приступить к работе.

Что такое «кирпичы источников»?

Расписание выпусков среды выполнения Light имеет следующий график выпуска среды выполнения Apache Spark. Версия источника данных Light основана на определенной версии Apache Spark. Дополнительные сведения см. в следующих заметках о выпуске:

Создание кластера с помощью источника "облегченные" кирпичы

При создании кластеразаданий в раскрывающемся списке версия Databricks Runtime выберите версию источника для источников.

Важно!

Поддержка блоков данных Light в кластерах заданий с резервным копированием в пул осуществляется в общедоступной предварительной версии.

Выберите источник «освещение»