Delen via


Databricks Runtime 14.3 LTS voor Machine Learning

Databricks Runtime 14.3 LTS voor Machine Learning biedt een kant-en-klareto-go-omgeving voor machine learning en gegevenswetenschap op basis van Databricks Runtime 14.3 LTS. Databricks Runtime ML bevat veel populaire machine learning-bibliotheken, waaronder TensorFlow, PyTorch en XGBoost. Databricks Runtime ML bevat AutoML, een hulpprogramma voor het automatisch trainen van machine learning-pijplijnen. Databricks Runtime ML biedt ook ondersteuning voor gedistribueerde Deep Learning-training met behulp van Horovod.

Notitie

LTS betekent dat deze versie op lange termijn wordt ondersteund. Zie de levenscyclus van de Databricks Runtime LTS-versie.

Aanbeveling

Als u releaseopmerkingen voor Databricks Runtime-versies wilt zien die end-of-support (EoS) hebben bereikt, raadpleegt u de releaseopmerkingen voor Databricks Runtime end-of-support. De EoS Databricks Runtime-versies zijn buiten gebruik gesteld en worden mogelijk niet bijgewerkt.

Nieuwe functies en verbeteringen

Databricks Runtime 14.3 LTS ML is gebaseerd op Databricks Runtime 14.3 LTS. Zie de releaseopmerkingen voor Databricks Runtime 14.3 LTS, waaronder Apache Spark MLlib en SparkR, voor informatie over wat er nieuw is in Databricks Runtime 14.3 LTS .

Systeemomgeving

De systeemomgeving in Databricks Runtime 14.3 LTS ML verschilt als volgt van Databricks Runtime 14.3 LTS:

  • Voor GPU-clusters bevat Databricks Runtime ML de volgende NVIDIA GPU-bibliotheken:
    • CUDA 11.8
    • cuDNN 8.9.0.131-1
    • NCCL 2.15.5
    • TensorRT 8.5.3-1

Databricks Runtime 14.3 LTS ML bevat XGBoost 1.7.6, die geen ONDERSTEUNING biedt voor GPU-clusters met rekenmogelijkheden 5.2 en lager.

Bibliotheken

In de volgende secties worden de bibliotheken vermeld die zijn opgenomen in Databricks Runtime 14.3 LTS ML die verschillen van de bibliotheken die zijn opgenomen in Databricks Runtime 14.3 LTS.

In deze sectie:

Topbibliotheken

Databricks Runtime 14.3 LTS ML bevat de volgende topkwaliteit bibliotheken:

Python bibliotheken

Databricks Runtime 14.3 LTS ML maakt gebruik van virtualenv voor Python pakketbeheer en bevat veel populaire ML-pakketten.

Naast de pakketten die in de volgende secties zijn opgegeven, bevat Databricks Runtime 14.3 LTS ML ook de volgende pakketten:

  • hyperopt 0.2.7+db4
  • sparkdl-3.0.0_db1
  • automl 1.24.0

Als u de Databricks Runtime ML-Python-omgeving in uw lokale Python virtuele omgeving wilt reproduceren, downloadt u het bestand requirements-14.3.txt en voert u pip install -r requirements-14.3.txt uit. Met deze opdracht worden alle open source bibliotheken geïnstalleerd die door Databricks Runtime ML worden gebruikt, maar worden geen bibliotheken geïnstalleerd die zijn ontwikkeld door Databricks, zoals databricks-automl, databricks-feature-store of de Databricks-fork van hyperopt.

Python bibliotheken op CPU-clusters

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
absl-py 1.0.0 versnellen 0.25.0 aiohttp 3.9.1
aiosignal 1.3.1 anyio 3.5.0 Appdirs (een hulpprogramma voor het beheren van applicatiedirectories) 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindingen 21.2.0 Astor 0.8.1
asttokens 2.0.5 astunparse 1.6.3 async-timeout 4.0.3
kenmerken 22.1.0 audiolezen 3.0.1 azure-core 1.29.1
azure-cosmos 4.3.1 Azure Storage Blob 12.19.0 Azure Storage File Data Lake 12.14.0
terugroepactie 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
zwart 22.6.0 bleekmiddel 4.1.0 knipperlicht 1.4
geluk 0.7.11 boto3 1.24.28 botocore 1.27.96
cachetools 5.3.2 catalogus 2.0.10 category-encoders 2.6.3
certificaat 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klikken 8.0.4 cloudpathlib 0.16.0
cloudpickle 2.0.0 cmdstanpy 1.2.0 communicatie 0.1.2
suikergoed 0.1.4 configparser 5.2.0 contourpy 1.0.5
cryptografie 39.0.1 wielrijder 0.11.0 cymem 2.0.8
Cython 0.29.32 daciet 1.8.1 databricks-automl-runtime (automatische machine learning omgeving van Databricks) 0.2.20
databricks-cli 0.18.0 Databricks functie-ontwikkeling 0.2.0 databricks-sdk (softwareontwikkelkit) 0.1.6
dataclasses-json 0.6.3 gegevenssets 2.15.0 dbl-tempo 0.1.26
dbus-python 1.2.18 debugpy 1.6.7 decorateur 5.1.1
deepspeed 0.12.4 defusedxml 0.7.1 dille 0.3.6
diskcache 5.6.3 distlib 0.3.7 Van docstring naar markdown 0,11
invoerpunten 0,4 beoordelen 0.4.1 Uitvoeren 0.8.3
facettenoverzicht 1.1.1 fastjsonschema 2.19.1 fasttext 0.9.2
bestandsvergrendeling 3.9.0 Flacon 2.2.5 FlatBuffers 23.5.26
lettertypegereedschappen 4.25.0 bevroren lijst 1.4.1 fsspec 2023.6.0
toekomst 0.18.3 gast 0.4.0 gitdb 4.0.11
GitPython 3.1.27 google-api-core 2.15.0 Google-authenticatie 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1 Google Cloud Storage (opslag in de cloud van Google) 2.11.0
google-crc32c 1.5.0 Google-pasta 0.2.0 google-heropneembare-media 2.7.0
googleapis-common-protos 1.62.0 greenlet (een mechanisme voor het beheren van microprocessen in Python) 2.0.1 grpcio 1.48.2
grpcio-status 1.48.1 gunicorn 20.1.0 gviz-api 1.10.0
h5py 3.7.0 hjson 3.1.0 vakantie 0,38
horovod (Russische volksdans) 0.28.1 htmlmin 0.1.12 httplib2 0.20.2
huggingface-hub 0.19.4 IDNA 3.4 ImageHash 4.3.1
onevenwichtig leren 0.11.0 importlib-metadata 4.11.3 importlib-resources 6.1.1
ipykernel 6.25.0 ipython 8.14.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 isodate (ISO-datum) 0.6.1 hetisgevarlijk 2.0.1
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib 1.2.0 joblibspark 0.5.1
jsonpatch 1.33 jsonpointer 2,4 jsonschema 4.17.3
jupyter-client (softwarepakket voor Jupyter-notebooks) 7.3.4 jupyter-server 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 hard 2.14.0
sleutelbeheer 23.5.0 kiwisolver 1.4.4 langchain 0.0.348
langchain-core 0.0.13 langcodes 3.3.0 langsmith 0.0.79
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
lazy_loader 0,3 libclang 15.0.6.1 librosa 0.10.1
lightgbm 4.1.0 llvmlite 0.39.1 lxml 4.9.1
Mako 1.2.0 Markdown 3.4.1 MarkupSafe 2.1.1
spekje 3.20.2 matplotlib 3.7.0 matplotlib-inline 0.1.6
Mccabe 0.7.0 onstemmen 0.8.4 ml-dtypes 0.2.0
mlflow-skinny 2.9.2 more-itertools 8.10.0 mpmath 1.2.1
msgpack 1.0.7 meervoudig woordenboek 6.0.4 multimethode 1,10
meerdere processen 0.70.14 murmurhash 1.0.10 mypy-extensions 0.4.3
nbclassic 0.5.2 nbclient 0.5.13 nbconvert 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 networkx 2.8.4
ninja 1.11.1.1 Natural Language Toolkit (nltk) 3.7 nodeenv 1.8.0
notitieboekje 6.5.2 notitieboek_shim 0.2.2 numba 0.56.4
numpy 1.23.5 oauthlib 3.2.0 openai 0.28.1
opt-einsum 3.3.0 verpakking 23.2 Pandas 1.5.3
pandocfilters 1.5.0 paramiko 2.9.2 parso 0.8.3
pathspec 0.10.3 Patsy 0.5.3 petastorm 0.12.1
pexpect 4.8.0 "Phik" 0.12.4 pickleshare 0.7.5
Kussen 9.4.0 pip 22.3.1 platformdirs 2.5.2
plotly 5.9.0 plugachtig 1.0.0 pmdarima 2.0.4
hondje 1.4.0 vooraf geslagen 3.0.9 prometheus-client 0.14.1
prompt-hulpmiddelenpakket 3.0.36 profeet 1.1.5 protocolbuffers 4.24.0
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 py-cpuinfo 9.0.0 pyarrow 8.0.0
pyarrow-hotfix 0,5 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.11.1 pycparser 2.21 pydantic (een Python-bibliotheek voor datavalidatie en instellingenbeheer) 1.10.6
pyflakes 3.1.0 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 PyNaCl 1.5.0 pynvml 11.5.0
pyodbc 4.0.32 pyparsing 3.0.9 pyright 1.1.294
pyrsistent 0.18.0 pytesseract 0.3.10 python-dateutil (een bibliotheek voor datum- en tijdgebaseerde functionaliteit in Python) 2.8.2
python-bewerker 1.0.4 python-lsp-jsonrpc 1.1.1 python-lsp-server 1.8.0
pytoolconfig 1.2.5 pytz 2022.7 PyWavelets 1.4.1
PyYAML 6,0 pyzmq 23.2.0 regex 2022.7.9
Verzoeken 2.28.1 requests-oauthlib 1.3.1 Reacties 0.18.0
touw 1.7.0 RSA 4.9 s3transfer 0.6.2
safetensors 0.4.1 scikit-learn 1.1.1 Scipy (een wetenschappelijke bibliotheek voor Python) 1.10.0
geboren op zee 0.12.2 SecretStorage 3.3.1 Send2Trash 1.8.0
sentence-transformers 2.2.2 zinsstuk 0.1.99 setuptools (een Python-pakket voor het beheren van installatie en distributie van pakketten) 65.6.3
SHAP 0.44.0 simplejson 3.17.6 Zes 1.16.0
Slicer 0.0.7 smart-open 5.2.1 smmap 5.0.0
sniffio 1.2.0 geluidsbestand 0.12.1 soupsieve 2.3.2.post1
soxr 0.3.7 spatie 3.7.2 spacy-legacy 3.0.12
spacy-loggers 1.0.5 spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39
sqlparse 0.4.2 Serieus? 2.4.8 ssh-import-id 5,11
stapelgegevens 0.2.0 stanio 0.3.0 statsmodels 0.13.5
sympy 1.11.1 tabelvormen 0.8.10 tangled-up-in-unicode 0.2.0
vasthoudendheid 8.1.0 Tensorbord 2.14.1 tensorboard-data-server (gegevensserver) 0.7.2
tensorboard-plugin-profiel 2.14.0 tensorflow-cpu 2.14.1 tensorflow-estimator 2.14.0
tensorflow-io-gcs-filesystem 0.35.0 termcolor 2.4.0 afgerond 0.17.1
thinc 8.2.2 threadpoolctl 2.2.0 tiktoken 0.5.2
tinycss2 1.2.1 tokenize-rt 4.2.1 tokeniseerders 0.15.0
tomli 2.0.1 fakkel 2.0.1+cpu fakkelvisie 0.15.2+cpu
tornado 6.1 tqdm 4.64.1 Traitlets (Python library voor het configureren van Python-objecten) 5.7.1
Transformatoren 4.36.1 typebeveiliging 2.13.3 Typer 0.9.0
typen-inspecteren 0.9.0 typuitbreidingen 4.4.0 ujson (een Python-bibliotheek voor snelle JSON-verwerking) 5.4.0
automatische updates zonder toezicht 0,1 urllib3 1.26.14 virtualenv 20.16.7
Visioenen 0.7.5 wadllib 1.3.6 wasabi 1.1.2
wcwidth 0.2.5 wezel 0.3.4 Webencoderingen 0.5.1
websocket-client 0.58.0 gereedschap 2.2.2 whatthepatch 1.0.2
wiel 0.38.4 widgetsnbextension 3.6.1 woordwolk 1.9.3
omsloten 1.14.1 xgboost 1.7.6 xxhash 3.4.1
yapf 0.33.0 yarl 1.9.4 ydata-profilering 4.2.0
ritssluiting 3.11.0

Python bibliotheken op GPU-clusters

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
absl-py 1.0.0 versnellen 0.25.0 aiohttp 3.9.1
aiosignal 1.3.1 anyio 3.5.0 Appdirs (een hulpprogramma voor het beheren van applicatiedirectories) 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindingen 21.2.0 Astor 0.8.1
asttokens 2.0.5 astunparse 1.6.3 async-timeout 4.0.3
kenmerken 22.1.0 audiolezen 3.0.1 azure-core 1.29.1
azure-cosmos 4.3.1 Azure Storage Blob 12.19.0 Azure Storage File Data Lake 12.14.0
terugroepactie 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
zwart 22.6.0 bleekmiddel 4.1.0 knipperlicht 1.4
geluk 0.7.11 boto3 1.24.28 botocore 1.27.96
cachetools 5.3.2 catalogus 2.0.10 category-encoders 2.6.3
certificaat 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klikken 8.0.4 cloudpathlib 0.16.0
cloudpickle 2.0.0 cmake 3.28.1 cmdstanpy 1.2.0
communicatie 0.1.2 suikergoed 0.1.4 configparser 5.2.0
contourpy 1.0.5 cryptografie 39.0.1 wielrijder 0.11.0
cymem 2.0.8 Cython 0.29.32 daciet 1.8.1
databricks-automl-runtime (automatische machine learning omgeving van Databricks) 0.2.20 databricks-cli 0.18.0 Databricks functie-ontwikkeling 0.2.0
databricks-sdk (softwareontwikkelkit) 0.1.6 dataclasses-json 0.6.3 gegevenssets 2.15.0
dbl-tempo 0.1.26 dbus-python 1.2.18 debugpy 1.6.7
decorateur 5.1.1 deepspeed 0.12.4 defusedxml 0.7.1
dille 0.3.6 diskcache 5.6.3 distlib 0.3.7
Van docstring naar markdown 0,11 einops 0.7.0 invoerpunten 0,4
beoordelen 0.4.1 Uitvoeren 0.8.3 facettenoverzicht 1.1.1
fastjsonschema 2.19.1 fasttext 0.9.2 bestandsvergrendeling 3.9.0
flash-attn 2.3.6 Flacon 2.2.5 FlatBuffers 23.5.26
lettertypegereedschappen 4.25.0 bevroren lijst 1.4.1 fsspec 2023.6.0
toekomst 0.18.3 gast 0.4.0 gitdb 4.0.11
GitPython 3.1.27 google-api-core 2.15.0 Google-authenticatie 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1 Google Cloud Storage (opslag in de cloud van Google) 2.11.0
google-crc32c 1.5.0 Google-pasta 0.2.0 google-heropneembare-media 2.7.0
googleapis-common-protos 1.62.0 greenlet (een mechanisme voor het beheren van microprocessen in Python) 2.0.1 grpcio 1.48.2
grpcio-status 1.48.1 gunicorn 20.1.0 gviz-api 1.10.0
h5py 3.7.0 hjson 3.1.0 vakantie 0,38
horovod (Russische volksdans) 0.28.1 htmlmin 0.1.12 httplib2 0.20.2
huggingface-hub 0.19.4 IDNA 3.4 ImageHash 4.3.1
onevenwichtig leren 0.11.0 importlib-metadata 4.11.3 importlib-resources 6.1.1
ipykernel 6.25.0 ipython 8.14.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 isodate (ISO-datum) 0.6.1 hetisgevarlijk 2.0.1
Jedi 0.18.1 Jeepney 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib 1.2.0 joblibspark 0.5.1
jsonpatch 1.33 jsonpointer 2,4 jsonschema 4.17.3
jupyter-client (softwarepakket voor Jupyter-notebooks) 7.3.4 jupyter-server 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 hard 2.14.0
sleutelbeheer 23.5.0 kiwisolver 1.4.4 langchain 0.0.348
langchain-core 0.0.13 langcodes 3.3.0 langsmith 0.0.79
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
lazy_loader 0,3 libclang 15.0.6.1 librosa 0.10.1
lightgbm 4.1.0 Verlicht 17.0.6 llvmlite 0.39.1
lxml 4.9.1 Mako 1.2.0 Markdown 3.4.1
MarkupSafe 2.1.1 spekje 3.20.2 matplotlib 3.7.0
matplotlib-inline 0.1.6 Mccabe 0.7.0 onstemmen 0.8.4
ml-dtypes 0.2.0 mlflow-skinny 2.9.2 more-itertools 8.10.0
mpmath 1.2.1 msgpack 1.0.7 meervoudig woordenboek 6.0.4
multimethode 1,10 meerdere processen 0.70.14 murmurhash 1.0.10
mypy-extensions 0.4.3 nbclassic 0.5.2 nbclient 0.5.13
nbconvert 6.5.4 nbformat 5.7.0 nest-asyncio 1.5.6
networkx 2.8.4 ninja 1.11.1.1 Natural Language Toolkit (nltk) 3.7
nodeenv 1.8.0 notitieboekje 6.5.2 notitieboek_shim 0.2.2
numba 0.56.4 numpy 1.23.5 oauthlib 3.2.0
openai 0.28.1 opt-einsum 3.3.0 verpakking 23.2
Pandas 1.5.3 pandocfilters 1.5.0 paramiko 2.9.2
parso 0.8.3 pathspec 0.10.3 Patsy 0.5.3
petastorm 0.12.1 pexpect 4.8.0 "Phik" 0.12.4
pickleshare 0.7.5 Kussen 9.4.0 pip 22.3.1
platformdirs 2.5.2 plotly 5.9.0 plugachtig 1.0.0
pmdarima 2.0.4 hondje 1.4.0 vooraf geslagen 3.0.9
prompt-hulpmiddelenpakket 3.0.36 profeet 1.1.5 protocolbuffers 4.24.0
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 py-cpuinfo 9.0.0 pyarrow 8.0.0
pyarrow-hotfix 0,5 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.11.1 pycparser 2.21 pydantic (een Python-bibliotheek voor datavalidatie en instellingenbeheer) 1.10.6
pyflakes 3.1.0 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 PyNaCl 1.5.0 pynvml 11.5.0
pyodbc 4.0.32 pyparsing 3.0.9 pyright 1.1.294
pyrsistent 0.18.0 pytesseract 0.3.10 python-dateutil (een bibliotheek voor datum- en tijdgebaseerde functionaliteit in Python) 2.8.2
python-bewerker 1.0.4 python-lsp-jsonrpc 1.1.1 python-lsp-server 1.8.0
pytoolconfig 1.2.5 pytz 2022.7 PyWavelets 1.4.1
PyYAML 6,0 pyzmq 23.2.0 regex 2022.7.9
Verzoeken 2.28.1 requests-oauthlib 1.3.1 Reacties 0.18.0
touw 1.7.0 RSA 4.9 s3transfer 0.6.2
safetensors 0.4.1 scikit-learn 1.1.1 Scipy (een wetenschappelijke bibliotheek voor Python) 1.10.0
geboren op zee 0.12.2 SecretStorage 3.3.1 Send2Trash 1.8.0
sentence-transformers 2.2.2 zinsstuk 0.1.99 setuptools (een Python-pakket voor het beheren van installatie en distributie van pakketten) 65.6.3
SHAP 0.44.0 simplejson 3.17.6 Zes 1.16.0
Slicer 0.0.7 smart-open 5.2.1 smmap 5.0.0
sniffio 1.2.0 geluidsbestand 0.12.1 soupsieve 2.3.2.post1
soxr 0.3.7 spatie 3.7.2 spacy-legacy 3.0.12
spacy-loggers 1.0.5 spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39
sqlparse 0.4.2 Serieus? 2.4.8 ssh-import-id 5,11
stapelgegevens 0.2.0 stanio 0.3.0 statsmodels 0.13.5
sympy 1.11.1 in tabellen opstellen 0.8.10 tangled-up-in-unicode 0.2.0
vasthoudendheid 8.1.0 Tensorbord 2.14.1 tensorboard-data-server (gegevensserver) 0.7.2
tensorboard-plugin-profiel 2.14.0 TensorFlow 2.14.1 tensorflow-estimator 2.14.0
tensorflow-io-gcs-filesystem 0.35.0 termcolor 2.4.0 afgerond 0.17.1
thinc 8.2.2 threadpoolctl 2.2.0 tiktoken 0.5.2
tinycss2 1.2.1 tokenize-rt 4.2.1 tokeniseerders 0.15.0
tomli 2.0.1 fakkel 2.0.1+cu118 fakkelvisie 0.15.2+cu118
tornado 6.1 tqdm 4.64.1 Traitlets (Python library voor het configureren van Python-objecten) 5.7.1
transformatoren 4.36.1 Triton 2.0.0 typebeveiliging 2.13.3
Typer 0.9.0 Typeringsinspectie 0.9.0 typuitbreidingen 4.4.0
ujson (een Python-bibliotheek voor snelle JSON-verwerking) 5.4.0 upgrades zonder toezicht 0,1 urllib3 1.26.14
virtualenv 20.16.7 Visies 0.7.5 wadllib 1.3.6
wasabi 1.1.2 wcwidth 0.2.5 wezel 0.3.4
Webencoderingen 0.5.1 websocket-client 0.58.0 gereedschap 2.2.2
whatthepatch 1.0.2 wiel 0.38.4 widgetsnbextension 3.6.1
woordwolk 1.9.3 omsloten 1.14.1 xgboost 1.7.6
xxhash 3.4.1 yapf 0.33.0 yarl 1.9.4
ydata-profilering 4.2.0 ritssluiting 3.11.0

R-bibliotheken

De R-bibliotheken zijn identiek aan de R-bibliotheken in Databricks Runtime 14.3 LTS.

Java en Scala-bibliotheken (Scala 2.12-cluster)

Naast Java- en Scala-bibliotheken in Databricks Runtime 14.3 LTS bevat Databricks Runtime 14.3 LTS ML de volgende JAR's:

CPU-clusters

Groeps-id Artefact-ID Versie
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.9.2
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

GPU-clusters

Groeps-id Artefact-id Versie
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.9.2
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0