Руководство по миграции Databricks Runtime 7.3 LTS (неподдерживаемое)
Это руководство поможет перенести рабочие нагрузки Azure Databricks в Databricks Runtime 7.3 LTS (неподдерживаемый) на базе Apache Spark 3.0.
Сведения о переносе рабочих нагрузок в Databricks Runtime 7.3 LTS см. в инструкциях по миграции для Apache Spark.
Databricks Runtime 11.3 LTS является последней поддерживаемой версией LTS. Чтобы перенести рабочие нагрузки из Databricks Runtime 7.3 LTS в Databricks Runtime 11.3 LTS, Databricks рекомендует перенести рабочие нагрузки в следующем порядке:
- Миграция в Databricks Runtime 10.4 LTS. См. руководство по миграции в Databricks Runtime 10.x LTS.
- Миграция из Databricks Runtime 10.4 LTS в Databricks Runtime 11.3 LTS. См. руководство по миграции Databricks Runtime 11.x.
Сведения о миграции между версиями среды выполнения Databricks см. в руководстве по миграции Databricks Runtime.
Инструкции по миграции для Apache Spark
Databricks Runtime 7.3 LTS работает на базе Apache Spark 3.0.1. Сведения о миграции для Spark см. в руководстве по миграции для Apache Spark 3.0.1. Приведенные ниже версии Databricks Runtime до Databricks Runtime 7.3 LTS включительно работают на основе следующих версий Apache Spark:
| Версия Databricks Runtime | Версия Apache Spark |
|---|---|
| 7.3 LTS | 3.0.1 |
| 7.0–7.2 | 3.0.0 |
| 6.4 (расширенная поддержка) — 6.6 | 2.4.5 |
| 6.4 (расширенная поддержка) и 6.4 | 2.4.5 |
| 6.1–6.3 | 2.4.4 |
| 5.5 LTS и 5.5 (расширенная поддержка) и 6.0 | 2.4.3 |
| 5.0–5.4 | 2.4 |
| 4.0–4.3 | 2.3 |
| 3.4–3.5 LTS | 2,2 |
| Light 2.4 (расширенная поддержка) и Light 2.4 | 2.4.0+ |
Сведения о миграции с версии Spark 2.4.x на версию 3.0 см. в следующих статьях:
- Переход с Core 2.4 на 3.0
- Руководство по миграции: SQL, наборы данных и DataFrame
- Переход с версии Structured Streaming 2.4 на версию 3.0
- Переход с версии MLib 2.4 на версию 3.0
- Переход с версии PySpark 2.4 на версию 3.0
- Переход с версии Spark 2.4 на версию 3.0
Сведения о миграции со Spark 2.4.4 на 2.4.5 см. в следующих статьях:
Сведения о миграции со Spark 2.4.3 на 2.4.4 см. в следующих статьях:
Сведения о миграции со Spark 2.3 на 2.4 см. в следующих статьях:
Сведения о миграции со Spark 2.2 на 2.3 см. в следующих статьях:
Дополнительные рекомендации по миграции
Дополнительные рекомендации по переносу рабочих нагрузок из Databricks Runtime 6.x в Databricks Runtime 7.x см. в руководстве по миграции Databricks Runtime 7.x (неподдерживаемое).