Machine Learning için Databricks Runtime 15.0
Machine Learning için Databricks Runtime 15.0, Databricks Runtime 15.0'ı temel alan makine öğrenmesi ve veri bilimi için kullanıma hazır bir ortam sağlar. Databricks Runtime ML, TensorFlow, PyTorch ve XGBoost gibi birçok popüler makine öğrenmesi kitaplığı içerir. Databricks Runtime ML, makine öğrenmesi işlem hatlarını otomatik olarak eğitmeye yönelik bir araç olan AutoML'yi içerir. Databricks Runtime ML, Horovod kullanarak dağıtılmış derin öğrenme eğitimini de destekler.
Yeni özellikler ve geliştirmeler
Databricks Runtime 15.0 ML, Databricks Runtime 15.0'ın üzerine kurulmuştur. Apache Spark MLlib ve SparkR dahil olmak üzere Databricks Runtime 15.0'daki yenilikler hakkında bilgi için bkz . Databricks Runtime 15.0 sürüm notları.
Hataya neden olan değişiklikler
Eski Databricks CLI artık varsayılan olarak yüklü değil
Databricks Runtime 14.3 LTS ML'de ve altında, MLflow'un önceden yüklenmiş sürümü eski Databricks CLI'yi (databricks/databricks-cli) gerektirdiğinden, $PATH'de otomatik olarak yüklendi. Databricks Runtime 15.0 ML, eski CLI gerektirmeyen MLflow sürüm 2.10.2'yi içerir.
Databricks Runtime 15.0 ML'den başlayarak, eski Databricks CLI artık $PATH'de otomatik olarak yüklenmez. Bu, çalışma zamanında yüklü olan eski CLI'ya bağımlı olan kullanıcılar için hataya neden olan bir değişikliktir. Gibi %sh databricks ... komutlar artık Databricks Runtime 15.0 ML ve üzerinde çalışmaz.
Eski Databricks CLI'yi bir not defterinden kullanmaya devam etmek için küme veya not defteri kitaplığı olarak yükleyin. Yeni Databricks CLI (databricks/cli) web terminalinden kullanılabilir. Daha fazla bilgi için bkz . Web terminali ve Databricks CLI kullanma.
MLeap artık Databricks Runtime 15.0 ML'den başlayarak kullanılamıyor
MLeap artık Databricks Runtime 15.0 ML ve üzerinde kullanılamaz. Databricks, JVM tabanlı çerçevelere dağıtım modellerini paketlemek için ONNX biçiminin kullanılmasını önerir.
Horovod ve HorovodRunner'ın kullanımdan kaldırılması
Horovod ve HorovodRunner artık kullanım dışı bırakıldı. Dağıtılmış derin öğrenme için Databricks, PyTorch ile dağıtılmış eğitim için TorchDistributor veya tf.distribute.Strategy TensorFlow ile dağıtılmış eğitim için API kullanılmasını önerir. Horovod ve HorovodRunner, Databricks Runtime 15.0 ML'ye önceden yüklenmiştir, ancak sonraki ana Databricks Runtime ML sürümünde kaldırılacaktır.
Not
horovod.spark pyarrow 11.0 ve üzeri sürümleri desteklemez (ilgili GitHub Sorununa bakın). Databricks Runtime 15.0 ML, pyarrow sürüm 14.0.1'i içerir. Databricks Runtime 15.0 ML veya üzeri ile kullanmak horovod.spark için, 11.0'ın altında bir sürüm belirterek el ile pyarrow yüklemeniz gerekir.
Sistem ortamı
Databricks Runtime 15.0 ML'deki sistem ortamı, Databricks Runtime 15.0'dan aşağıdaki gibi farklıdır:
- GPU kümeleri için Databricks Runtime ML aşağıdaki NVIDIA GPU kitaplıklarını içerir:
- CUDA 12.1
- cuDNN 8.9.0.131-1
- NCCL 2.17.1
- TensorRT 8.6.1.6-1
Kitaplıklar
Aşağıdaki bölümlerde Databricks Runtime 15.0 ML'de bulunan ve Databricks Runtime 15.0'daki kitaplıklardan farklı kitaplıklar listelenmiştir.
Bu bölümde:
- Üst katman kitaplıkları
- Python kitaplıkları
- R kitaplıkları
- Java ve Scala kitaplıkları (Scala 2.12 kümesi)
Üst katman kitaplıkları
Databricks Runtime 15.0 ML aşağıdaki üst katman kitaplıklarını içerir:
- GraphFrames
- MLflow
- PyTorch
- spark-tensorflow-connector
- TensorFlow
- TensorBoard
- Scikit-learn
- (Kullanım dışı) Horovod ve HorovodRunner
Python kitaplıkları
Databricks Runtime 15.0 ML, Python paket yönetimi için kullanılır virtualenv ve birçok popüler ML paketi içerir.
Aşağıdaki bölümlerde belirtilen paketlere ek olarak Databricks Runtime 15.0 ML aşağıdaki paketleri de içerir:
- hyperopt 0.2.7+db4
- sparkdl 3.0.0_db1
- automl 1.25.0
Databricks Runtime ML Python ortamını yerel Python sanal ortamınızda yeniden oluşturmak için requirements-15.0.txt dosyasını indirin ve çalıştırınpip install -r requirements-15.0.txt. Bu komut, Databricks Runtime ML'nin kullandığı tüm açık kaynak kitaplıklarını yükler, ancak Databricks tarafından geliştirilen , databricks-feature-storeveya Databricks çatalı hyperoptgibi databricks-automlkitaplıkları yüklemez.
CPU kümelerinde Python kitaplıkları
| Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | Hızlandır | 0.25.0 | aiohttp | 3.8.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | anyio | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | zaman uyumsuz zaman aşımı | 4.0.2 |
| attrs | 22.1.0 | sesli okuma | 3.0.1 | azure-core | 1.30.1 |
| azure-cosmos | 4.3.1 | azure-storage-blob | 12.19.0 | azure-storage-file-datalake | 12.14.0 |
| geri arama | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.2 |
| Siyah | 23.3.0 | Çamaşır suyu | 4.1.0 | Kutsan -mış | 1.20.0 |
| yanıp sönen | 1.4 | Blıs | 0.7.11 | boto3 | 1.34.39 |
| botocore | 1.34.39 | önbellek araçları | 5.3.3 | Katalog | 2.0.10 |
| kategori kodlayıcıları | 2.6.3 | sertifikalı | 2023.7.22 | cffi | 1.15.1 |
| chardet | 4.0.0 | charset-normalizer | 2.0.4 | tıklama | 8.0.4 |
| cloudpathlib | 0.16.0 | cloudpickle | 2.2.1 | cmdstanpy | 1.2.1 |
| Renkli | 0.5.6 | Comm | 0.1.2 | Konfeksiyon | 0.1.4 |
| yapılandırmaparser | 5.2.0 | konturlu | 1.0.5 | Şifreleme | 41.0.3 |
| Cycler | 0.11.0 | cymem | 2.0.8 | Cython | 0.29.32 |
| dacite | 1.8.1 | databricks-automl-runtime | 0.2.21 | databricks-feature-engineering | 0.3.0 |
| databricks-sdk | 0.20.0 | dataclasses-json | 0.6.4 | veri kümeleri | 2.16.1 |
| dbl-tempo | 0.1.26 | dbus-python | 1.2.18 | hata ayıklama | 1.6.7 |
| Dekoratör | 5.1.1 | deepspeed | 0.13.1 | defusedxml | 0.7.1 |
| Dereotu | 0.3.6 | diskcache | 5.6.3 | daistlib | 0.3.8 |
| dm-tree | 0.1.8 | Entrypoints | 0.4 | değerlendir | 0.4.1 |
| Yürütme | 0.8.3 | modellere genel bakış | 1.1.1 | Farama Bildirimleri | 0.0.4 |
| fastjsonschema | 2.19.1 | fasttext | 0.9.2 | dosya kilidi | 3.9.0 |
| Flask | 2.2.5 | flatbuffers | 23.5.26 | fonttools | 4.25.0 |
| frozenlist | 1.3.3 | fsspec | 2023.5.0 | Gelecek | 0.18.3 |
| Gast | 0.4.0 | gitdb | 4.0.11 | GitPython | 3.1.27 |
| google-api-core | 2.17.1 | google-auth | 2.21.0 | google-auth-oauthlib | 1.0.0 |
| google-cloud-core | 2.4.1 | google-cloud-storage | 2.11.0 | google-crc32c | 1.5.0 |
| google-pasta | 0.2.0 | google-resumable-media | 2.7.0 | googleapis-common-protos | 1.62.0 |
| gpustat | 1.1.1 | yeşillik | 2.0.1 | grpcio | 1.60.0 |
| grpcio-status | 1.60.0 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| Gymnasium | 0.28.1 | h11 | 0.14.0 | h5py | 3.9.0 |
| hjson | 3.1.0 | Tatil | 0,38 | horovod | 0.28.1+db1 |
| htmlmin | 0.1.12 | httpcore | 1.0.4 | httplib2 | 0.20.2 |
| httpx | 0.27.0 | huggingface-hub | 0.20.2 | ıdna | 3.4 |
| ImageHash | 4.3.1 | imageio | 2.31.1 | dengesiz-öğrenme | 0.11.0 |
| importlib-metadata | 6.0.0 | importlib_resources | 6.1.2 | ipyflow-core | 0.0.198 |
| ipykernel | 6.25.1 | ipython | 8.15.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 8.0.4 | izodat | 0.6.1 | itsdangerous | 2.0.1 |
| jax-jumpy | 1.0.0 | Jedi | 0.18.1 | Jeepney | 0.7.1 |
| Jinja2 | 3.1.2 | jmespath | 0.10.0 | joblib | 1.2.0 |
| joblibspark | 0.5.1 | jsonpatch | 1,33 | jsonpointer | 2.4 |
| jsonschema | 4.17.3 | jupyter-server | 1.23.4 | jupyter_client | 7.4.9 |
| jupyter_core | 5.3.0 | jupyterlab-pygments | 0.1.2 | jupyterlab pencere öğeleri | 3.0.5 |
| keras | 2.15.0 | Anahtarlık | 23.5.0 | kiwisolver | 1.4.4 |
| langchain | 0.1.3 | langchain-community | 0.0.20 | langchain-core | 0.1.23 |
| langcodes | 3.3.0 | langsmith | 0.0.87 | başlatma çubuğu | 1.10.16 |
| lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 | lazy_loader | 0,2 |
| libclang | 16.0.6 | librosa | 0.10.1 | lightgbm | 4.2.0 |
| llvmlite | 0.40.0 | lxml | 4.9.2 | lz4 | 4.3.2 |
| Mako | 1.2.0 | Markdown | 3.4.1 | markdown-it-py | 2.2.0 |
| İşaretlemeyi Kasa | 2.1.1 | Hatmi | 3.21.1 | matplotlib | 3.7.2 |
| matplotlib-inline | 0.1.6 | mdurl | 0.1.0 | yanlış | 0.8.4 |
| ml-dtypes | 0.2.0 | mlflow-skinny | 2.10.2 | more-itertools | 8.10.0 |
| mpmath | 1.3.0 | msgpack | 1.0.8 | multidict | 6.0.2 |
| multimethod | 1.11.2 | çok işlemcili | 0.70.14 | murmurhash | 1.0.10 |
| mypy uzantıları | 0.4.3 | nbclassic | 0.5.5 | nbclient | 0.5.13 |
| nbconvert | 6.5.4 | nbformat | 5.7.0 | nest-asyncio | 1.5.6 |
| networkx | 3.1 | Ninja | 1.11.1.1 | nltk | 3.8.1 |
| not defteri | 6.5.4 | notebook_shim | 0.2.2 | numba | 0.57.1 |
| numpy | 1.23.5 | nvidia-ml-py | 12.535.133 | oauthlib | 3.2.0 |
| openai | 1.9.0 | opencensus | 0.11.4 | opencensus-context | 0.1.3 |
| opt-einsum | 3.3.0 | Ambalaj | 23,2 | pandas | 2.0.3 |
| pandocfilters | 1.5.0 | paramiko | 2.9.2 | parso | 0.8.3 |
| pathspec | 0.10.3 | Patsy | 0.5.3 | petastorm | 0.12.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | pickleshare | 0.7.5 |
| Yastık | 9.4.0 | Pip | 23.2.1 | platformdirs | 3.10.0 |
| çizim | 5.9.0 | pmdarima | 2.0.4 | Pooch | 1.8.1 |
| önceden gösterilmiş | 3.0.9 | prometheus-client | 0.14.1 | prompt-toolkit | 3.0.36 |
| Peygamber | 1.1.5 | protobuf | 4.24.1 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | saf değerlendirme | 0.2.2 |
| py-cpuinfo | 8.0.0 | py-spy | 0.3.14 | serçe | 14.0.1 |
| pyarrow düzeltmesi | 0,6 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| pybind11 | 2.11.1 | pyccolo | 0.0.52 | pycparser | 2.21 |
| pydantic | 1.10.6 | Pygments | 2.15.1 | PyGObject | 3.42.1 |
| PyJWT | 2.3.0 | PyNaCl | 1.5.0 | pynvml | 11.5.0 |
| pyodbc | 4.0.38 | pyparsing | 3.0.9 | pirsistent | 0.18.0 |
| pytesseract | 0.3.10 | python-dateutil | 2.8.2 | python düzenleyicisi | 1.0.4 |
| python-lsp-jsonrpc | 1.1.1 | pytz | 2022.7 | PyWavelets | 1.4.1 |
| PyYAML | 6,0 | pyzmq | 23.2.0 | Ray | 2.9.3 |
| Regex | 2022.7.9 | istekler | 2.31.0 | requests-oauthlib | 1.3.1 |
| Yanıt | 0.13.3 | Tiran | 13.7.1 | rsa | 4,9 |
| s3transfer | 0.10.0 | safetensors | 0.3.2 | scikit-image | 0.20.0 |
| scikit-learn | 1.3.0 | scipy | 1.11.1 | Sinan | 0.12.2 |
| Gizli dizi Depolama | 3.3.1 | Send2Trash | 1.8.0 | cümle transformatörleri | 2.2.2 |
| cümle parçası | 0.1.99 | kurulum araçları | 68.0.0 | Shap | 0.44.0 |
| simplejson | 3.17.6 | Altı | 1.16.0 | Dilimleyici | 0.0.7 |
| akıllı açma | 5.2.1 | smmap | 5.0.0 | sniffio | 1.2.0 |
| ses dosyası | 0.12.1 | soupsieve | 2.4 | soxr | 0.3.7 |
| spacy | 3.7.2 | spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 |
| spark-tensorflow-distributor | 1.0.0 | SQLAlchemy | 1.4.39 | sqlparse | 0.4.2 |
| srsly | 2.4.8 | ssh-import-id | 5.11 | stack-data | 0.2.0 |
| stanio | 0.3.0 | statsmodeller | 0.14.0 | sympy | 1.11.1 |
| unicode'da karışık | 0.2.0 | Azim | 8.2.2 | tensorboard | 2.15.1 |
| tensorboard-data-server | 0.7.2 | tensorboard-plugin-profile | 2.15.0 | tensorboardX | 2.6.2.2 |
| tensorflow-cpu | 2.15.0 | tensorflow-estimator | 2.15.0 | tensorflow-io-gcs-filesystem | 0.36.0 |
| termcolor | 2.4.0 | terminado | 0.17.1 | thinc | 8.2.3 |
| threadpoolctl | 2.2.0 | tifffile | 2021.7.2 | tiktoken | 0.5.2 |
| tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | belirteç oluşturucular | 0.15.0 |
| Meşale | 2.1.2+cpu | torcheval | 0.0.7 | torchvision | 0.16.2+cpu |
| Kasırga | 6.3.2 | tqdm | 4.65.0 | traitlets | 5.7.1 |
| Transformers | 4.36.2 | typeguard | 2.13.3 | Typer | 0.9.0 |
| yazma-inceleme | 0.9.0 | typing_extensions | 4.7.1 | tzdata | 2022.1 |
| ujson | 5.4.0 | katılımsız yükseltmeler | 0,1 | urllib3 | 1.26.16 |
| virtualenv | 20.21.0 | Vizyon | 0.7.5 | wadllib | 1.3.6 |
| Wasabi | 1.1.2 | wcwidth | 0.2.5 | Gelincik | 0.3.4 |
| webencodings | 0.5.1 | websocket-client | 0.58.0 | Werkzeug | 2.2.3 |
| Tekerlek | 0.38.4 | widgetsnbextension | 4.0.5 | wordcloud | 1.9.3 |
| kaydırma | 1.14.1 | xgboost | 2.0.3 | xxhash | 3.4.1 |
| yarl | 1.8.1 | ydata-profil oluşturma | 4.5.1 | zipp | 3.11.0 |
GPU kümelerinde Python kitaplıkları
| Kitaplık | Sürüm | Kitaplık | Sürüm | Kitaplık | Sürüm |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | Hızlandır | 0.25.0 | aiohttp | 3.8.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | anyio | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | zaman uyumsuz zaman aşımı | 4.0.2 |
| attrs | 22.1.0 | sesli okuma | 3.0.1 | azure-core | 1.30.1 |
| azure-cosmos | 4.3.1 | azure-storage-blob | 12.19.0 | azure-storage-file-datalake | 12.14.0 |
| geri arama | 0.2.0 | bcrypt | 3.2.0 | beautifulsoup4 | 4.12.2 |
| Siyah | 23.3.0 | Çamaşır suyu | 4.1.0 | Kutsan -mış | 1.20.0 |
| yanıp sönen | 1.4 | Blıs | 0.7.11 | boto3 | 1.34.39 |
| botocore | 1.34.39 | önbellek araçları | 5.3.3 | Katalog | 2.0.10 |
| kategori kodlayıcıları | 2.6.3 | sertifikalı | 2023.7.22 | cffi | 1.15.1 |
| chardet | 4.0.0 | charset-normalizer | 2.0.4 | tıklama | 8.0.4 |
| cloudpathlib | 0.16.0 | cloudpickle | 2.2.1 | cmdstanpy | 1.2.1 |
| Renkli | 0.5.6 | Comm | 0.1.2 | Konfeksiyon | 0.1.4 |
| yapılandırmaparser | 5.2.0 | konturlu | 1.0.5 | Şifreleme | 41.0.3 |
| Cycler | 0.11.0 | cymem | 2.0.8 | Cython | 0.29.32 |
| dacite | 1.8.1 | databricks-automl-runtime | 0.2.21 | databricks-feature-engineering | 0.3.0 |
| databricks-sdk | 0.20.0 | dataclasses-json | 0.6.4 | veri kümeleri | 2.16.1 |
| dbl-tempo | 0.1.26 | dbus-python | 1.2.18 | hata ayıklama | 1.6.7 |
| Dekoratör | 5.1.1 | deepspeed | 0.13.1 | defusedxml | 0.7.1 |
| Dereotu | 0.3.6 | diskcache | 5.6.3 | daistlib | 0.3.8 |
| dm-tree | 0.1.8 | einops | 0.7.0 | Entrypoints | 0.4 |
| değerlendir | 0.4.1 | Yürütme | 0.8.3 | modellere genel bakış | 1.1.1 |
| Farama Bildirimleri | 0.0.4 | fastjsonschema | 2.19.1 | fasttext | 0.9.2 |
| dosya kilidi | 3.9.0 | flash-attn | 2.5.0 | Flask | 2.2.5 |
| flatbuffers | 23.5.26 | fonttools | 4.25.0 | frozenlist | 1.3.3 |
| fsspec | 2023.5.0 | Gelecek | 0.18.3 | Gast | 0.4.0 |
| gitdb | 4.0.11 | GitPython | 3.1.27 | google-api-core | 2.17.1 |
| google-auth | 2.21.0 | google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 |
| google-cloud-storage | 2.11.0 | google-crc32c | 1.5.0 | google-pasta | 0.2.0 |
| google-resumable-media | 2.7.0 | googleapis-common-protos | 1.62.0 | gpustat | 1.1.1 |
| yeşillik | 2.0.1 | grpcio | 1.60.0 | grpcio-status | 1.60.0 |
| gunicorn | 20.1.0 | gviz-api | 1.10.0 | Gymnasium | 0.28.1 |
| h11 | 0.14.0 | h5py | 3.9.0 | hjson | 3.1.0 |
| Tatil | 0,38 | horovod | 0.28.1+db1 | htmlmin | 0.1.12 |
| httpcore | 1.0.4 | httplib2 | 0.20.2 | httpx | 0.27.0 |
| huggingface-hub | 0.20.2 | ıdna | 3.4 | ImageHash | 4.3.1 |
| imageio | 2.31.1 | dengesiz-öğrenme | 0.11.0 | importlib-metadata | 6.0.0 |
| importlib_resources | 6.1.2 | ipyflow-core | 0.0.198 | ipykernel | 6.25.1 |
| ipython | 8.15.0 | ipython-genutils | 0.2.0 | ipywidgets | 8.0.4 |
| izodat | 0.6.1 | itsdangerous | 2.0.1 | jax-jumpy | 1.0.0 |
| Jedi | 0.18.1 | Jeepney | 0.7.1 | Jinja2 | 3.1.2 |
| jmespath | 0.10.0 | joblib | 1.2.0 | joblibspark | 0.5.1 |
| jsonpatch | 1,33 | jsonpointer | 2.4 | jsonschema | 4.17.3 |
| jupyter-server | 1.23.4 | jupyter_client | 7.4.9 | jupyter_core | 5.3.0 |
| jupyterlab-pygments | 0.1.2 | jupyterlab pencere öğeleri | 3.0.5 | keras | 2.15.0 |
| Anahtarlık | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.1.3 |
| langchain-community | 0.0.20 | langchain-core | 0.1.23 | langcodes | 3.3.0 |
| langsmith | 0.0.87 | başlatma çubuğu | 1.10.16 | lazr.restfulclient | 0.14.4 |
| lazr.uri | 1.0.6 | lazy_loader | 0,2 | libclang | 16.0.6 |
| librosa | 0.10.1 | lightgbm | 4.2.0 | llvmlite | 0.40.0 |
| lxml | 4.9.2 | lz4 | 4.3.2 | Mako | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | İşaretlemeyi Kasa | 2.1.1 |
| Hatmi | 3.21.1 | matplotlib | 3.7.2 | matplotlib-inline | 0.1.6 |
| mdurl | 0.1.0 | yanlış | 0.8.4 | ml-dtypes | 0.2.0 |
| mlflow-skinny | 2.10.2 | more-itertools | 8.10.0 | mpmath | 1.3.0 |
| msgpack | 1.0.8 | multidict | 6.0.2 | multimethod | 1.11.2 |
| çok işlemcili | 0.70.14 | murmurhash | 1.0.10 | mypy uzantıları | 0.4.3 |
| nbclassic | 0.5.5 | nbclient | 0.5.13 | nbconvert | 6.5.4 |
| nbformat | 5.7.0 | nest-asyncio | 1.5.6 | networkx | 3.1 |
| Ninja | 1.11.1.1 | nltk | 3.8.1 | not defteri | 6.5.4 |
| notebook_shim | 0.2.2 | numba | 0.57.1 | numpy | 1.23.5 |
| nvidia-ml-py | 12.535.133 | oauthlib | 3.2.0 | openai | 1.9.0 |
| opencensus | 0.11.4 | opencensus-context | 0.1.3 | opt-einsum | 3.3.0 |
| Ambalaj | 23,2 | pandas | 2.0.3 | pandocfilters | 1.5.0 |
| paramiko | 2.9.2 | parso | 0.8.3 | pathspec | 0.10.3 |
| Patsy | 0.5.3 | petastorm | 0.12.1 | pexpect | 4.8.0 |
| phik | 0.12.4 | pickleshare | 0.7.5 | Yastık | 9.4.0 |
| Pip | 23.2.1 | platformdirs | 3.10.0 | çizim | 5.9.0 |
| pmdarima | 2.0.4 | Pooch | 1.8.1 | önceden gösterilmiş | 3.0.9 |
| prompt-toolkit | 3.0.36 | Peygamber | 1.1.5 | protobuf | 4.24.1 |
| psutil | 5.9.0 | psycopg2 | 2.9.3 | ptyprocess | 0.7.0 |
| saf değerlendirme | 0.2.2 | py-cpuinfo | 8.0.0 | py-spy | 0.3.14 |
| serçe | 14.0.1 | pyarrow düzeltmesi | 0,6 | pyasn1 | 0.4.8 |
| pyasn1-modules | 0.2.8 | pybind11 | 2.11.1 | pyccolo | 0.0.52 |
| pycparser | 2.21 | pydantic | 1.10.6 | Pygments | 2.15.1 |
| PyGObject | 3.42.1 | PyJWT | 2.3.0 | PyNaCl | 1.5.0 |
| pynvml | 11.5.0 | pyodbc | 4.0.38 | pyparsing | 3.0.9 |
| pirsistent | 0.18.0 | pytesseract | 0.3.10 | python-dateutil | 2.8.2 |
| python düzenleyicisi | 1.0.4 | python-lsp-jsonrpc | 1.1.1 | pytz | 2022.7 |
| PyWavelets | 1.4.1 | PyYAML | 6,0 | pyzmq | 23.2.0 |
| Ray | 2.9.3 | Regex | 2022.7.9 | istekler | 2.31.0 |
| requests-oauthlib | 1.3.1 | Yanıt | 0.13.3 | Tiran | 13.7.1 |
| rsa | 4,9 | s3transfer | 0.10.0 | safetensors | 0.3.2 |
| scikit-image | 0.20.0 | scikit-learn | 1.3.0 | scipy | 1.11.1 |
| Sinan | 0.12.2 | Gizli dizi Depolama | 3.3.1 | Send2Trash | 1.8.0 |
| cümle transformatörleri | 2.2.2 | cümle parçası | 0.1.99 | kurulum araçları | 68.0.0 |
| Shap | 0.44.0 | simplejson | 3.17.6 | Altı | 1.16.0 |
| Dilimleyici | 0.0.7 | akıllı açma | 5.2.1 | smmap | 5.0.0 |
| sniffio | 1.2.0 | ses dosyası | 0.12.1 | soupsieve | 2.4 |
| soxr | 0.3.7 | spacy | 3.7.2 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | spark-tensorflow-distributor | 1.0.0 | SQLAlchemy | 1.4.39 |
| sqlparse | 0.4.2 | srsly | 2.4.8 | ssh-import-id | 5.11 |
| stack-data | 0.2.0 | stanio | 0.3.0 | statsmodeller | 0.14.0 |
| sympy | 1.11.1 | unicode'da karışık | 0.2.0 | Azim | 8.2.2 |
| tensorboard | 2.15.1 | tensorboard-data-server | 0.7.2 | tensorboard-plugin-profile | 2.15.0 |
| tensorboardX | 2.6.2.2 | tensorflow | 2.15.0 | tensorflow-estimator | 2.15.0 |
| tensorflow-io-gcs-filesystem | 0.36.0 | termcolor | 2.4.0 | terminado | 0.17.1 |
| thinc | 8.2.3 | threadpoolctl | 2.2.0 | tifffile | 2021.7.2 |
| tiktoken | 0.5.2 | tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 |
| belirteç oluşturucular | 0.15.0 | Meşale | 2.1.2+cu121 | torcheval | 0.0.7 |
| torchvision | 0.16.2+cu121 | Kasırga | 6.3.2 | tqdm | 4.65.0 |
| traitlets | 5.7.1 | Transformers | 4.36.2 | Triton | 2.1.0 |
| typeguard | 2.13.3 | Typer | 0.9.0 | yazma-inceleme | 0.9.0 |
| typing_extensions | 4.7.1 | tzdata | 2022.1 | ujson | 5.4.0 |
| katılımsız yükseltmeler | 0,1 | urllib3 | 1.26.16 | virtualenv | 20.21.0 |
| Vizyon | 0.7.5 | wadllib | 1.3.6 | Wasabi | 1.1.2 |
| wcwidth | 0.2.5 | Gelincik | 0.3.4 | webencodings | 0.5.1 |
| websocket-client | 0.58.0 | Werkzeug | 2.2.3 | Tekerlek | 0.38.4 |
| widgetsnbextension | 4.0.5 | wordcloud | 1.9.3 | kaydırma | 1.14.1 |
| xgboost | 2.0.3 | xxhash | 3.4.1 | yarl | 1.8.1 |
| ydata-profil oluşturma | 4.5.1 | zipp | 3.11.0 |
R kitaplıkları
R kitaplıkları Databricks Runtime 15.0'daki R Kitaplıklarıyla aynıdır.
Java ve Scala kitaplıkları (Scala 2.12 kümesi)
Databricks Runtime 15.0'daki Java ve Scala kitaplıklarına ek olarak, Databricks Runtime 15.0 ML aşağıdaki JAR'leri içerir:
CPU kümeleri
| Grup Kimliği | Yapıt Kimliği | Sürüm |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.10.2 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU kümeleri
| Grup Kimliği | Yapıt Kimliği | Sürüm |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
| org.mlflow | mlflow-client | 2.10.2 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
Geri Bildirim
Çok yakında: 2024 boyunca, içerik için geri bildirim mekanizması olarak GitHub Sorunları’nı kullanımdan kaldıracak ve yeni bir geri bildirim sistemiyle değiştireceğiz. Daha fazla bilgi için bkz. https://aka.ms/ContentUserFeedback.
Gönderin ve geri bildirimi görüntüleyin