Databricks Runtime 4,1 ML (nepodporované)

Databricks Runtime 4,1 ML poskytuje prostředí připravené k použití pro Machine Learning a datové vědy. Obsahuje několik oblíbených knihoven, včetně TensorFlow, Keras a XGBoost. Podporuje také distribuované školení TensorFlow pomocí Horovod.

Poznámka

Tato verze se už od 17. ledna 2019. Doporučujeme používat novější verzi Databricks runtime ml v závislosti na tom, jaké verze knihovny chcete použít.

Další informace, včetně pokynů pro vytvoření clusteru Databricks Runtime ML, najdete v článku Databricks Runtime Machine Learning.

Poznámka

Verze Databricks Runtime ML vyberou všechny aktualizace údržby pro základní Databricks Runtime. Seznam všech aktualizací údržby najdete v tématu aktualizace údržby modulu runtime datacihly.

Knihovny

Databricks Runtime 4,1 ML je postavená na Databricks Runtime 4,1. Informace o tom, co je nového v Databricks Runtime 4,1, najdete v poznámkách k verzi Databricks Runtime 4,1 (nepodporované) . Kromě nových funkcí v Databricks Runtime 4,1 obsahuje Databricks Runtime 4,1 ML následující knihovny pro podporu strojového učení. Některé z nich jsou také zahrnuty v základní Databricks Runtime 4,1 a jsou označeny jako takové.

Kategorie Knihovny
Distribuované hloubkové učení Distribuované školení pomocí Horovod a Sparku:

* HorovodEstimator
* horovod 0.12.1
* OpenMP 3.0.0
* paramiko 2.4.1
* cloudpickle 0.5.2

Předpověď distribuovaných TensorFlow a Keras:

* Předběžná verze Spark-hlubokého učení 1,0
* tensorframes 0.3.0
Obsáhlý Learning [Keras]:

* keras 2.1.5
* h5py 2.7.1

TensorFlow:

* (Clustery CPU) tensorflow 1.7.1
* (Clustery GPU) tensorflow – GPU 1.7.1

Knihovny GPU :

* CUDA 9,0 (nainstaluje se taky do základního Databricks Runtime)
* cuDNN 7,0 (nainstaluje se taky do základního Databricks Runtime)
* NCCL 2.0.5 – 3
XGBoost * XGBoost4j 0,8-Spark 2.3-S_2.11
Jiné knihovny strojového učení * numpy 1.14.2 (také nainstalované v základní Databricks runtime; verze se může lišit.)
* scikit- 0.18.1 (také nainstalované v základní Databricks Runtime)
* scipy (také nainstalováno v základní Databricks Runtime)