共用方式為

Databricks Runtime 13.2 （不支援）

  • 發行項

下列版本資訊提供由 Apache Spark 3.4.0 提供之 Databricks Runtime 13.2 的相關信息。

Databricks 於 2023 年 7 月發行了這些映射。

新功能和改善

RocksDB 狀態存放區的變更記錄檢查點

您可以針對具狀態結構化串流工作負載啟用變更記錄檢查點，以降低檢查點持續時間和端對端延遲。 Databricks 建議為所有結構化串流具狀態的查詢，啟用變更記錄檢查點。 請參閱 啟用變更記錄檢查點。

Unity 目錄中具有淺層複製的 VACUUM 增強可靠性。

當您針對淺層複製作業的來源和目標使用 Unity 目錄受控數據表時，Unity 目錄會管理基礎數據檔，以改善複製作業來源和目標的可靠性。 在淺層複製的來源上執行 VACUUM 並不會中斷複製的數據表。 請參閱 Vacuum 和 Unity 目錄淺層複製。

在 SQL 中支援 Python UDF

您現在可以在 Unity 目錄中的 SQL CREATE FUNCTION 語句中使用 Python 宣告使用者定義函式。 請參閱 Unity 目錄中的使用者定義函式 （UDF）。

Delta Lake UniForm for Iceberg 處於公開預覽狀態

Delta Lake Universal Format （UniForm） 可讓您使用 Iceberg 用戶端讀取 Delta 數據表。 請參閱 使用 UniForm 來讀取 Delta 數據表與 Iceberg 用戶端。

Delta Lake liquid clustering 處於公開預覽狀態

Delta Lake liquid 叢集會取代數據表分割，並 ZORDER 簡化數據配置決策，並將查詢效能優化。 請參閱針對差異資料表使用液態叢集 \(英文\)。

Azure Databricks 中的封存支援

Azure Databricks 中的封存支持引進了一組功能，可讓您在包含 Delta 數據表的雲端物件記憶體上使用雲端式生命周期原則，將檔案移至封存儲存層。 請參閱 Azure Databricks 中的封存支援。

IDENTIFIER 子句支援

用來 IDENTIFIER(:mytable) 安全地將許多SQL語句中的數據表、數據行、函式和架構名稱參數化。

Python 和 Pandas 使用者定義函式的 Unity 目錄支援 （UDF）

在 Databricks Runtime 13.2 和更新版本上，在已啟用 Unity 目錄的工作區中使用共用存取模式的叢集上，支援以 Python 撰寫的使用者定義函式 （UDF）。 這包括 Python 和 Pandas UDF。 如需 Python UDF 的詳細資訊，請參閱 使用者定義的純量函式 - Python。

使用 Delta Sharing 共用共享架構

Databricks Runtime 13.2 新增了使用 ALTER SHARE <share-name> ADD SCHEMA <schema-name> Delta Sharing 共用整個架構的能力，讓收件者能夠存取您共享架構中的所有數據表和檢視，以及未來新增至架構的任何數據表和檢視。 請參閱 將架構新增至共用 和 ALTER SHARE。

錯誤修正

  • 已修正 JSON 讀取器的錯誤，如果failOnUnknownFieldsmode已啟用，則會在模式中PERMISSIVE剖析記錄。 記錄現在會在模式中 DROPMALFORMEDparser 卸除，如果已設定這些選項，則會寫出至 badRecordsPath。 FAILFAST 如果數據行類型不相符，就會擲回錯誤。

連結庫升級

  • 升級的 Python 連結庫：
    • 從 1.7.0 到 1.8.0 的 nodeenv
  • 升級的 R 連結庫：
  • 升級的 Java 連結庫：
    • io.delta.delta-sharing-spark_2.12，從 0.6.7 到 0.7.0

Apache Spark

Databricks Runtime 13.2 包含 Apache Spark 3.4.0。 此版本包含 Databricks Runtime 13.1 中所包含的所有 Spark 修正和改善，以及下列對 Spark 進行的其他錯誤修正和改進：

  • [SPARK-42750] [SC-133452][DBRRM-273]支援 Insert By Name 語句
  • [SPARK-43133] [SC-133728]Scala 用戶端 DataStreamWriter Foreach 支援
  • [SPARK-43663] [SC-134135][CONNECT][PS]使 SeriesParityTests.test_compare
  • [SPARK-43684][SC-134162][SPARK-43685][SPARK-43686][SPARK-43691][CONNECT][PS]修正 (NullOps|NumOps).(eq|ne) Spark 連線。
  • [SPARK-44021] [SC-134109][SQL]新增 spark.sql.files.maxPartitionNum
  • [SPARK-43910][SC-132936][SQL]錯誤中的識別碼等量__auto_generated_subquery_name
  • [SPARK-43976] [SC-133375][CORE]處理事件記錄檔中不存在modifiedConfigs的情況
  • [SPARK-32559] [SC-133992][SQL]修正修剪邏輯未正確處理 ASCII 控制字元
  • [SPARK-43421] [SC-132930][SS]實作 RocksDB 狀態存放區提供者的 Changelog 型檢查點
  • [SPARK-43594] [SC-133851][SQL]將 LocalDateTime 新增至 anyToMicros
  • [SPARK-43884] [SC-133867]DDL 中的 Param 標記
  • [SPARK-43398] [SC-133894][CORE]執行程式逾時應該是閑置隨機和 rdd 逾時上限
  • [SPARK-43610][SC-133892][CONNECT][PS]在Spark 連線 中啟用InternalFrame.attach_distributed_column。
  • [SPARK-43971] [SC-133826][CONNECT][PYTHON]以串流方式支援 Python 的 createDataFrame
  • [SPARK-44006] [SC-133652][CONNECT][PYTHON]支援快取成品
  • [SPARK-43790] [SC-133468][PYTHON][CONNECT][ML] 新增 copyFromLocalToFs API
  • [SPARK-43921] [SC-133461][PROTOBUF]在建置階段產生 Protobuf 描述元檔案
  • [SPARK-43906] [SC-133638][SC-133404][PYTHON][CONNECT]在SparkSession.addArtifacts 中實作檔案支援
  • [SPARK-44010] [SC-133744][PYTHON][SS][MINOR]Python StreamingQueryProgress 數據列PerSecond 類型修正
  • [SPARK-43768][SC-132398][PYTHON][CONNECT]Python Spark 中的 Python 相依性管理支援 連線
  • [SPARK-43979] [13.X]還原 “[SC-133456][SQL] CollectedMetrics 應該視為與自我聯結相同的參數”
  • [SPARK-42290] [SC-133696][SQL]修正 AQE 開啟時無法回報 OOM 錯誤
  • [SPARK-43943] [SC-133648][SQL][PYTHON][CONNECT]將 SQL 數學函式新增至 Scala 和 Python
  • [SPARK-43747] [SC-132047][PYTHON][CONNECT]在 SparkSession.addArtifacts 中實作 pyfile 支援
  • [SPARK-43700][SC-133726][SPARK-43701][CONNECT][PS]使用Spark連線啟用TimedeltaOps.(sub|rsub)
  • [SPARK-43712] [SC-133641][SPARK-43713][CONNECT][PS]啟用同位測試： test_line_plot、 test_pie_plot。
  • [SPARK-43867] [SC-132895][SQL]改善未解析屬性的建議候選專案
  • [SPARK-43901] [SC-133454][SQL]Avro 支援由 Long 支援的自定義十進位類型
  • [SPARK-43267] [SC-133024][JDBC]將 postgres 未知的使用者定義資料行當作陣列中的字串處理
  • [SPARK-43935] [SC-133637][SQL][PYTHON][CONNECT]將 xpath_* 函式新增至 Scala 和 Python
  • [SPARK-43916] [SC-133647][SQL][PYTHON][CONNECT]將百分位數新增至 Scala 和 Python API
  • [SPARK-43717] [SC-133455][CONNECT]Scala 用戶端縮減 agg 無法處理 Scala 基本輸入的 Null 分割區
  • [SPARK-43984][SC-133469][SQL][PROTOBUF]變更為在不會產生結果時map使用foreach
  • [SPARK-43612] [SC-132011][CONNECT][PYTHON]在 Python 用戶端中實作 SparkSession.addArtifact（s）
  • [SPARK-44002] [SC-133606][CONNECT]修正成品狀態處理程式
  • [SPARK-43933] [SC-133470][SQL][PYTHON][CONNECT]將線性回歸聚合函數新增至 Scala 和 Python
  • [SPARK-43920] [SC-133614][SQL][CONNECT]建立 sql/api 模組
  • [SPARK-43979] [SC-133456][SQL]CollectedMetrics 應該視為與自我聯結相同的集合
  • [SPARK-43977] [SC-133373][CONNECT]修正 未預期的檢查結果 dev/connect-jvm-client-mima-check
  • [SPARK-43985] [SC-133412][PROTOBUF] spark protobuf：將列舉修正為 ints Bug
  • [SPARK-43930] [SC-133406][SQL][PYTHON][CONNECT]將 unix_* 函式新增至 Scala 和 Python
  • [SPARK-43807] [SC-132545][SQL]將_LEGACY_ERROR_TEMP_1269移轉至PARTITION_SCHEMA_IS_EMPTY
  • [SPARK-43956] [SC-133123][SQL]修正 Bug 不會針對 Percentile 顯示數據行的 sql[Cont|光碟]
  • [SPARK-42626] [SC-133248][CONNECT]新增 SparkResult 的破壞性反覆運算器
  • [SPARK-43333] [SC-132898][SQL]允許 Avro 將等位類型轉換成具有類型穩定功能變數名稱的 SQL
  • [SPARK-43953] [SC-133134][CONNECT]刪除 pass
  • [SPARK-43970] [SC-133403][PYTHON][CONNECT]從自動完成隱藏不支持的數據框架方法
  • [SPARK-43973] [SC-133272][SS][UI]結構化串流 UI 應該正確顯示失敗的查詢
  • [SPARK-42577] [SC-125445][CORE]為階段新增最大嘗試限制，以避免潛在的無限重試
  • [SPARK-43841] [SC-132699][SQL]處理中沒有前置詞的候選屬性 StringUtils#orderSuggestedIdentifiersBySimilarity
  • [SPARK-41497] [SC-124795][CORE][待處理]將組態 spark.rdd.cache.visibilityTracking.enabled 支援版本修改為 3.5.0
  • [SPARK-37942] [SC-130983][CORE][SQL]移轉錯誤類別
  • [SPARK-43898] [SC-132926][CORE]自動註冊 immutable.ArraySeq$ofRef 至 KryoSerializer Scala 2.13
  • [SPARK-43775] [SC-132891][SQL]DataSource V2：允許將更新表示為刪除和插入
  • [SPARK-43817] [SC-132662][SPARK-43702][PYTHON]支援從 pandas DataFrame 和 toPandas 建立DataFrame 中的 UserDefinedType
  • [SPARK-43418] [SC-132753][SC-130685][CONNECT]新增 SparkSession.Builder.getOrCreate
  • [SPARK-43549] [SC-132383][SQL]將_LEGACY_ERROR_TEMP_0036轉換為INVALID_SQL_SYNTAX。ANALYZE_TABLE_UNEXPECTED_NOSCAN
  • [SPARK-41497] [SC-124644][CORE]修正使用 rdd 快取重試工作的累加器不足計數
  • [SPARK-43892][SC-133006][PYTHON]在中新增自動完成支援df[|]pyspark.sql.dataframe.DataFrame
  • [SPARK-43881] [SC-133140][SQL][PYTHON][CONNECT]新增 Catalog.listDatabases 的選擇性模式
  • [SPARK-43205] [SC-132623]IDENTIFIER 子句
  • [SPARK-43545] [SC-132378][SQL][PYTHON]支援巢狀時間戳類型
  • [SPARK-43949] [SC-133048][PYTHON]將 cloudpickle 升級至 2.2.1
  • [SPARK-43760] [SC-132809][SQL]純量子查詢結果的 Null 性
  • [SPARK-43696][SC-132737][SPARK-43697][SPARK-43698][SPARK-43699][PS]Spark 連線 修正TimedeltaOps
  • [SPARK-43895] [SC-132897][CONNECT][GO]準備 go 套件路徑
  • [SPARK-43894] [SC-132892][PYTHON]修正 df.cache（） 中的 Bug
  • [SPARK-43509][SC-131625][CONNECT]支援建立多個Spark連線工作階段
  • [SPARK-43882] [SC-132888][SQL]將名稱指派給_LEGACY_ERROR_TEMP_2122
  • [SPARK-43687][SC-132747][SPARK-43688][SPARK-43689][SPARK-43690][PS]Spark 連線 修正NumOps
  • [SPARK-43604] [SC-132165][SQL]重構 INVALID_SQL_SYNTAX 以避免在原始程式碼中內嵌錯誤的文字
  • [SPARK-43859] [SC-132883][SQL]在 LateralColumnAliasReference 中覆寫 toString
  • [SPARK-43792] [SC-132939][SQL][PYTHON][CONNECT]新增 Catalog.listCatalogs 的選擇性模式
  • [SPARK-43353] 還原 “[SC-132734][PYTHON] 將剩餘的會話錯誤移轉至錯誤類別”
  • [SPARK-43375] [SC-130309][CONNECT]改善INVALID_CONNECT_URL的錯誤訊息
  • [SPARK-43863][SC-132721][CONNECT]從移除 Scala 2.13 的備援toSeqSparkConnectPlanner
  • [SPARK-43676][SC-132708][SPARK-43677][SPARK-43678][SPARK-43679][PS]Spark 連線 修正DatetimeOps
  • [SPARK-43666][SC-132689][SPARK-43667][SPARK-43668][SPARK-43669][PS]Spark 連線 修正BinaryOps
  • [SPARK-43680][SC-132709][SPARK-43681][SPARK-43682][SPARK-43683][PS]Spark 連線 修正NullOps
  • [SPARK-43782] [SC-132885][CORE]使用靜態 Spark conf 支援記錄層級設定
  • [SPARK-43132] [SC-131623][SS][CONNECT]Python 用戶端 DataStreamWriter foreach（） API
  • [SPARK-43290] [SC-131961][SQL]將 AES IV 和 AAD 支援新增至 ExpressionImplUtils
  • [SPARK-43795][SC-132532][CONNECT]拿掉未用於 Spark 的參數 連線 Planner
  • [SPARK-42317] [SC-129194][SQL]將名稱指派給_LEGACY_ERROR_TEMP_2247：CANNOT_MERGE_SCHEMAS
  • [SPARK-43597] [SC-131960][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_0017
  • [SPARK-43834] [SC-132679][SQL]在編譯錯誤中使用錯誤類別 ResolveDefaultColumns
  • [SPARK-43749] [SC-132423][SPARK-43750][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_240[4-5]
  • [SPARK-43576] [SC-132533][CORE]從 Core 模組移除未使用的宣告
  • [SPARK-43314][SC-129970][CONNECT][PYTHON]將 Spark 連線 客戶端錯誤遷移至錯誤類別
  • [SPARK-43799] [SC-132715][PYTHON]將描述元二進位選項新增至 Pyspark Protobuf API
  • [SPARK-43837] [SC-132678][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_103[1-2]
  • [SPARK-43862] [SC-132750][SQL]將名稱指派給錯誤類別 LEGACY_ERROR_TEMP（1254 和 1315）
  • [SPARK-43886] [SC-132808][PYTHON]接受泛型 Tuple 作為 Pandas UDF 的輸入提示
  • [SPARK-43530] [SC-132653][PROTOBUF]僅讀取描述元檔案一次
  • [SPARK-43820] [SC-132676][SPARK-43822][SPARK-43823][SPARK-43826][SPARK-43827]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_241[1-7]
  • [SPARK-43671][SC-132519][SPARK-43672][SPARK-43673][SPARK-43674][PS]Spark 連線 修正CategoricalOps
  • [SPARK-39979] [SC-132685][SQL]新增選項以針對箭頭 UDF 作業使用大型可變寬度向量
  • [SPARK-43692][SC-132660][SPARK-43693][SPARK-43694][SPARK-43695][PS]Spark 連線 修正StringOps
  • [SPARK-43353] [SC-132734][PYTHON]將剩餘的工作階段錯誤移轉至錯誤類別
  • [SPARK-43815] [SC-132781][SQL]新增 to_varchar 的別名 to_char
  • [SPARK-43543] [13.x][SC-131839][PYTHON]修正 Pandas UDF 中的巢狀 MapType 行為
  • [SPARK-43361] [SC-131789][PROTOBUF] 更新與列舉串行化相關的錯誤檔
  • [SPARK-43740] [SC-132035][PYTHON][CONNECT]從自動完成隱藏不支援 session 的方法
  • [SPARK-43022] [SC-131681][CONNECT]支援 Scala 用戶端的 protobuf 函式
  • [SPARK-43304] [13.x][SC-129969][CONNECT][PYTHON]遷移 NotImplementedError 至 PySparkNotImplementedError
  • [SPARK-43860] [SC-132713][SQL]盡可能啟用尾遞歸
  • [SPARK-42421] [SC-132695][CORE]使用 utils 取得用於本機檢查點之動態配置的參數
  • [SPARK-43590] [SC-132012][CONNECT]進行 connect-jvm-client-mima-check 以支援mima protobuf 檢查模組
  • [SPARK-43315] [13.x][CONNECT][PYTHON][SS]從 DataFrame 移轉剩餘的錯誤（讀取器|寫入器） 進入錯誤類別
  • [SPARK-43361] [SC-130980][PROTOBUF] spark-protobuf：允許以 enum 作為 ints 的 serde
  • [SPARK-43789] [SC-132397][R] 根據預設，在 R createDataFrame 中使用 'spark.sql.execution.arrow.maxRecordsPerBatch'
  • [SPARK-43596] [SC-126994][SQL]處理 rewriteDomainJoins 中的 IsNull 述詞
  • [SPARK-42249] [SC-122565][SQL]在錯誤訊息中精簡檔的 HTML 連結。
  • [SPARK-43128] [SC-131628][CONNECT][SS]讓 recentProgress 和 lastProgress 傳回 StreamingQueryProgress 與原生 Scala Api 一致
  • [SPARK-43387] [SC-130448][SQL]為_LEGACY_ERROR_TEMP_1168提供人類可讀取的錯誤碼。
  • [SPARK-43334] [SC-132358][UI]修正將 ExecutorPeakMetricsDistributions 串行化為 API 回應時的錯誤
  • [SPARK-42958] [SC-131475][CONNECT]重構 connect-jvm-client-mima-check 以支援avro模組的mima檢查
  • [SPARK-43591] [SC-131977][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_0013
  • [SPARK-38464] [SC-132211][CORE]在 org.apache.spark.io 中使用錯誤類別
  • [SPARK-43759] [SC-132189][SQL][PYTHON]在 pyspark.sql.types 中公開 TimestampNTZType
  • [SPARK-43649] [SC-132036][SPARK-43650][SPARK-43651][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_240[1-3]
  • [SPARK-43719] [SC-132016][WEBUI]句柄 missing row.excludedInStages 欄位
  • [SPARK-42956] [SC-127257][CONNECT]支援 Scala 用戶端的 avro 函式
  • [SPARK-43487] [SC-131975][SQL]修正巢狀 CTE 錯誤訊息
  • [SPARK-43265] [SC-129653]將錯誤架構移至常見的公用程式模組
  • [SPARK-40912] [SC-131547][CORE]KryoDeserializationStream 中的例外狀況額外負荷
  • [SPARK-43583] [SC-131976][CORE] 從委派取得 MergedBlockedMetaReqHandler，而不是 SaslRpcHandler 實例
  • [SPARK-42996] [SC-131997][CONNECT][PS][ML] 建立並指派所有失敗測試的適當 JIRA 票證。
  • [SPARK-38469] [SC-131425][CORE]在 org.apache.spark.network 中使用錯誤類別
  • [SPARK-43718] [SC-132014][SQL]在 USING 聯結中正確設定索引鍵可為 Null
  • [SPARK-43502] [SC-131419][PYTHON][CONNECT] DataFrame.drop 應該接受空白數據行
  • [SPARK-43743] [SC-132038][SQL]埠 HIVE-12188（DoAs 無法在非 Kerberos 保護 HS2 中正常運作）
  • [SPARK-43598] [SC-131929][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_2400
  • [SPARK-43138] [SC-131031][CORE]修正移轉期間的 ClassNotFoundException
  • [SPARK-43360] [SC-131526][SS][CONNECT]Scala 用戶端 StreamingQueryManager
  • [SPARK-38467] [SC-131025][CORE]在 org.apache.spark.memory 中使用錯誤類別
  • [SPARK-43345] [SC-131790][SPARK-43346][SQL]重新命名錯誤類別 LEGACY_ERROR_TEMP[0041|1206]
  • [SPARK-42815] [SC-126450][SQL]子表達式消除支援快捷方式表達式
  • [SPARK-38462] [SC-130449][CORE]新增錯誤類別INTERNAL_ERROR_EXECUTOR
  • [SPARK-43589] [SC-131798][SQL]修正 cannotBroadcastTableOverMaxTableBytesError 以使用 bytesToString
  • [SPARK-43539] [SC-131830][SQL]將名稱指派給錯誤類別_LEGACY_ERROR_TEMP_0003
  • [SPARK-43157] [SC-131688][SQL]複製 InMemoryRelation 快取計劃以防止複製的計劃參考相同的物件
  • [SPARK-43309] [SC-129746][SPARK-38461][CORE]使用類別擴充INTERNAL_ERROR，並新增錯誤類別INTERNAL_ERROR_BROADCAST
  • [SPARK-43281] [SC-131370][SQL]修正並行寫入器不會更新檔案計量
  • [SPARK-43383] [SC-130660][SQL]將統計數據新增 rowCount 至 LocalRelation
  • [SPARK-43574] [SC-131739][PYTHON][SQL]支援在運行時間期間為背景工作角色中的 UDF 和 pandas 函式 API 設定 Python 可執行檔
  • [SPARK-43569] [SC-131694][SQL]拿掉HADOOP-14067的因應措施
  • [SPARK-43183] [SC-128938][SS][13.x]將新的回呼 「onQueryIdle」 引入 StreamingQueryListener
  • [SPARK-43528] [SC-131531][SQL][PYTHON]在具有 pandas DataFrame 的 createDataFrame 中支援重複的功能變數名稱
  • [SPARK-43548] [SC-131686][SS]拿掉HADOOP-16255的因應措施
  • [SPARK-43494] [SC-131272][CORE]直接呼叫 replicate()HdfsDataOutputStreamBuilder 而不是反映 SparkHadoopUtil#createFile
  • [SPARK-43471] [SC-131063][CORE]處理遺漏 hadoopProperties 和 metricsProperties
  • [SPARK-42899] [SC-126456][SQL]修正 DataFrame.to（schema） 來處理可為 Null 的欄位中有不可為 Null 的巢狀字段的情況
  • [SPARK-43302] [SC-129747][SQL]將 Python UDAF 設為 AggregateFunction
  • [SPARK-43223][SC-131270][連線] 輸入 agg， reduce functions， RelationalGroupedDataset#as
  • [SPARK-43482] [SC-131375][SS]如果 QueryTerminatedEvent 存在於例外狀況中，請展開 QueryTerminatedEvent 以包含錯誤類別
  • [SPARK-43359] [SC-131463][SQL]從 Hive 資料表刪除應該會擲回 「UNSUPPORTED_FEATURE」。TABLE_OPERATION”
  • [SPARK-43284] [SC-130313]切換回 URL 編碼字串
  • [SPARK-43492] [SC-131227][SQL]新增 3-args 函式 DATE_ADD 別名和 DATE_DIFF
  • [SPARK-43473] [SC-131372][PYTHON]從 pandas DataFrame 支援 createDataFrame 中的結構類型
  • [SPARK-43386] [SC-131110][SQL]改善錯誤類別中 UNRESOLVED_COLUMN.WITH_SUGGESTION 建議的數據行/屬性清單
  • [SPARK-43443] [SC-131332][SQL]使用無效值時，新增時間戳類型推斷的基準檢驗
  • [SPARK-43518] [SC-131420][SQL]轉換成 _LEGACY_ERROR_TEMP_2029 INTERNAL_ERROR
  • [SPARK-42604] [SC-130648][CONNECT]實作 functions.typedlit
  • [SPARK-42323] [ES-669513]還原 “[SC-123479][SQL] 將名稱指派給 _LEGACY_ERROR_TEMP_2332”
  • [SPARK-43357] [SC-130649][SQL]篩選日期類型引號日期
  • [SPARK-43410] [SC-130526][SQL]改善 Packed skipValues 的向量化迴圈
  • [SPARK-43441] [SC-130995][CORE] makeDotNode 當 DeterministicLevel 不存在時，不應該失敗
  • [SPARK-43324] [SC-130455][SQL]處理差異型來源的 UPDATE 命令
  • [SPARK-43272] [SC-131168][CORE]直接呼叫 createFile 而不是反映
  • [SPARK-43296][13.x][SC-130627][CONNECT][PYTHON]將 Spark 連線 工作階段錯誤遷移至錯誤類別
  • [SPARK-43405][SC-130987][SQL]拿掉無getRowFormatSQL用、 方法 outputRowFormatSQLinputRowFormatSQL
  • [SPARK-43447] [SC-131017][R] 支援 R 4.3.0
  • [SPARK-43425] [SC-130981][SQL]新增 TimestampNTZType 至 ColumnarBatchRow
  • [SPARK-41532] [SC-130523][CONNECT][CLIENT]新增涉及多個數據框架的作業檢查
  • [SPARK-43262][SC-129270][CONNECT][SS][PYTHON]將 Spark 連線 結構化串流錯誤遷移至錯誤類別
  • [SPARK-42992] [13.x][SC-129465][PYTHON]介紹 PySparkRuntimeError
  • [SPARK-43422] [SC-130982][SQL]使用元數據輸出將標籤保留在LogicalRelation上
  • [SPARK-43390] [SC-130646][SQL]DSv2 允許 CTAS/RTAS 保留架構可為 Null
  • [SPARK-43430] [SC-130989][CONNECT][PROTO]ExecutePlanRequest 支援任意要求選項。
  • [SPARK-43313] [SC-130254][SQL]新增 MERGE INSERT 動作的遺漏數據行預設值
  • [SPARK-42842] [SC-130438][SQL]將錯誤類別_LEGACY_ERROR_TEMP_2006合併至 REGEX_GROUP_INDEX
  • [SPARK-43377][SC-130405][SQL]默認為啟用spark.sql.thriftServer.interruptOnCancel
  • [SPARK-43292][SC-130525][CORE][CONNECT]core移至ExecutorClassLoader模組並簡化Executor#addReplClassLoaderIfNeeded
  • [SPARK-43040] [SC-130310][SQL]改善 JDBC 資料源中的 TimestampNTZ 類型支援
  • [SPARK-43343] [SC-130629][SS]建立 DataSource 時，FileStreamSource 應該停用額外的檔案 Glob 檢查
  • [SPARK-43312] [SC-130294][PROTOBUF]將 [任何欄位] 轉換成 JSON 的選項
  • [SPARK-43404] [SC-130586][SS]略過針對相同版本的 RocksDB 狀態存放區重複使用 sst 檔案，以避免標識碼不符錯誤
  • [SPARK-43397] [SC-130614][CORE]方法中的 executorLost 記錄執行程式解除委任持續時間
  • [SPARK-42388] [SC-128568][SQL]避免在向量化讀取器中讀取 parquet 頁尾兩次
  • [SPARK-43306] [13.x][SC-130320][PYTHON]將 ValueError 從 Spark SQL 類型遷移至錯誤類別
  • [SPARK-43337] [SC-130353][UI][3.4] 排序數據行的 Asc/desc 箭頭圖示不會顯示在數據表數據行中
  • [SPARK-43279] [SC-130351][CORE]清除未使用的成員 SparkHadoopUtil
  • [SPARK-43250][SC-130147][SQL]以內部錯誤取代錯誤類別_LEGACY_ERROR_TEMP_2014
  • [SPARK-43363] [SC-130299][SQL][PYTHON]只有在未提供箭頭類型時，才呼叫 astype 類別類型
  • [SPARK-43261] [SC-130154][PYTHON]從 Spark SQL 類型遷移 TypeError 至錯誤類別
  • [SPARK-41971] [SC-130230][SQL][PYTHON]新增 pandas 轉換的組態，以如何處理結構類型
  • [SPARK-43381] [SC-130464][CONNECT]讓 'transformStatCov' 延遲
  • [SPARK-43362] [SC-130481][SQL]MySQL 連接器 JSON 類型的特殊處理
  • [SPARK-42843] [SC-130196][SQL]將錯誤類別_LEGACY_ERROR_TEMP_2007更新為 REGEX_GROUP_INDEX
  • [SPARK-42585] [SC-129968][CONNECT]當地關係的串流
  • [SPARK-43181] [SC-130476][SQL]在殼層中 spark-sql 顯示UI WebURL
  • [SPARK-43051] [SC-130194][CONNECT]新增選項以發出預設值
  • [SPARK-43204] [SC-129296][SQL]將 MERGE 指派與數據表屬性對齊
  • [SPARK-43348][SC-130082][PYTHON]PyPy3 中的支援Python 3.8
  • [SPARK-42845] [SC-130078][SQL]將錯誤類別_LEGACY_ERROR_TEMP_2010更新為 InternalError
  • [SPARK-43211] [SC-128978][HIVE]拿掉IsolatedClientLoader中的Hadoop2支援

系統環境

  • 操作系統：Ubuntu 22.04.2 LTS
  • Java：Zulu 8.70.0.23-CA-linux64
  • Scala：2.12.15
  • Python：3.10.12
  • R：4.2.2
  • Delta Lake：2.4.0

已安裝的 Python 程式庫

程式庫 版本 程式庫 版本 程式庫 版本
appdirs 1.4.4 argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0
asttokens 2.2.1 attrs 21.4.0 backcall 0.2.0
beautifulsoup4 4.11.1 black 22.6.0 bleach 4.1.0
blinker 1.4 boto3 1.24.28 botocore 1.27.28
certifi 2022.9.14 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 按一下 8.0.4 密碼編譯 37.0.1
cycler 0.11.0 Cython 0.29.32 databricks-sdk 0.1.6
dbus-python 1.2.18 debugpy 1.5.1 decorator 5.1.1
defusedxml 0.7.1 distlib 0.3.6 docstring-to-markdown 0.12
entrypoints 0.4 執行 1.2.0 facets-overview 1.0.3
fastjsonschema 2.16.3 filelock 3.12.0 fonttools 4.25.0
googleapis-common-protos 1.56.4 grpcio 1.48.1 grpcio-status 1.48.1
httplib2 0.20.2 idna 3.3 importlib-metadata 4.6.4
ipykernel 6.17.1 ipython 8.10.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 jedi 0.18.1 jeepney 0.7.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.2.0
jsonschema 4.16.0 jupyter-client 7.3.4 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 keyring 23.5.0
kiwisolver 1.4.2 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 MarkupSafe 2.0.1 matplotlib 3.5.2
matplotlib-inline 0.1.6 mccabe 0.7.0 mistune 0.8.4
more-itertools 8.10.0 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.5.0 nest-asyncio 1.5.5
nodeenv 1.8.0 notebook 6.4.12 numpy 1.21.5
oauthlib 3.2.0 封裝 21.3 pandas 1.4.4
pandocfilters 1.5.0 parso 0.8.3 pathspec 0.9.0
patsy 0.5.2 pexpect 4.8.0 pickleshare 0.7.5
Pillow 9.2.0 pip 22.2.2 platformdirs 2.5.2
plotly 5.9.0 pluggy 1.0.0 prometheus-client 0.14.1
prompt-toolkit 3.0.36 protobuf 3.19.4 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 8.0.0 pycparser 2.21 pydantic 1.10.6
pyflakes 3.0.1 Pygments 2.11.2 PyGObject 3.42.1
PyJWT 2.3.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 火熱 0.18.0 python-dateutil 2.8.2
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.2
pytz 2022.1 pyzmq 23.2.0 requests 2.28.1
繩 1.7.0 s3transfer 0.6.0 scikit-learn 1.1.1
scipy 1.9.1 seaborn 0.11.2 秘密 儲存體 3.3.1
Send2Trash 1.8.0 setuptools 63.4.1 六次 1.16.0
soupsieve 2.3.1 ssh-import-id 5.11 stack-data 0.6.2
statsmodels 0.13.2 tenacity 8.1.0 terminado 0.13.1
testpath 0.6.0 threadpoolctl 2.2.0 tokenize-rt 4.2.1
tomli 2.0.1 tornado 6.1 traitlets 5.1.1
typing_extensions 4.3.0 ujson 5.4.0 自動升級 0.1
urllib3 1.26.11 virtualenv 20.16.3 wadllib 1.3.6
wcwidth 0.2.5 webencodings 0.5.1 whatthepatch 1.0.2
wheel 0.37.1 widgetsnbextension 3.6.1 yapf 0.31.0
zipp 1.0.0

已安裝的 R 連結庫

R 連結庫會從 2023-02-10 上的 Microsoft CRAN 快照集安裝。

程式庫 版本 程式庫 版本 程式庫 版本
箭號 10.0.1 askpass 1.1 assertthat 0.2.1
backports 1.4.1 base 4.2.2 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.3
boot 1.3-28 brew 1.0-8 brio 1.1.3
broom 1.0.3 bslib 0.4.2 cachem 1.0.6
callr 3.7.3 caret 6.0-93 cellranger 1.1.0
chron 2.3-59 class 7.3-21 cli 3.6.0
clipr 0.8.0 clock 0.6.1 叢集 2.1.4
codetools 0.2-19 colorspace 2.1-0 commonmark 1.8.1
compiler 4.2.2 config 0.3.1 cpp11 0.4.3
crayon 1.5.2 credentials 1.3.2 curl 5.0.0
data.table 1.14.6 datasets 4.2.2 DBI 1.1.3
dbplyr 2.3.0 遞減 1.4.2 devtools 2.4.5
diffobj 0.3.5 digest 0.6.31 downlit 0.4.2
dplyr 1.1.0 dtplyr 1.2.2 e1071 1.7-13
省略符號 0.3.2 evaluate 0.20 fansi 1.0.4
farver 2.1.1 fastmap 1.1.0 fontawesome 0.5.0
forcats 1.0.0 foreach 1.5.2 foreign 0.8-82
forge 0.2.0 fs 1.6.1 future 1.31.0
future.apply 1.10.0 漱口 1.3.0 泛型 0.1.3
格特 1.9.2 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-6 globals 0.16.2
glue 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
gower 1.0.1 graphics 4.2.2 grDevices 4.2.2
grid 4.2.2 gridExtra 2.3 gsubfn 0.7
gtable 0.3.1 hardhat 1.2.0 避風港 2.5.1
highr 0.10 hms 1.1.2 htmltools 0.5.4
htmlwidgets 1.6.1 httpuv 1.6.8 httr 1.4.4
ids 1.0.1 ini 0.3.1 ipred 0.9-13
isoband 0.2.7 iterators 1.0.14 jquerylib 0.1.4
jsonlite 1.8.4 KernSmooth 2.23-20 針織機 1.42
labeling 0.4.2 later 1.3.0 lattice 0.20-45
Lava 1.7.1 生命週期 1.0.3 listenv 0.9.0
lubridate 1.9.1 magrittr 2.0.3 markdown 1.5
MASS 7.3-58.2 矩陣 1.5-1 備忘 2.0.1
方法 4.2.2 mgcv 1.8-41 mime 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.10
蒙塞爾 0.5.0 nlme 3.1-162 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.5 parallel 4.2.2
parallelly 1.34.0 pillar 1.8.1 pkgbuild 1.4.0
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2
plogr 0.2.0 plyr 1.8.8 讚美 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 進度 1.2.2
progressr 0.13.0 promises 1.2.0.1 proto 1.0.0
proxy 0.4-27 ps 1.7.2 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 不雅 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.10 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.2 recipes 1.0.4
rematch 1.0.1 rematch2 2.1.2 remotes 2.4.2
reprex 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2.20 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-12
RSQLite 2.2.20 rstudioapi 0.14 rversions 2.1.2
rvest 1.0.3 sass 0.4.5 scales 1.2.1
selectr 0.4-2 sessioninfo 1.2.2 shape 1.4.6
shiny 1.7.4 sourcetools 0.1.7-1 sparklyr 1.7.9
SparkR 3.4.0 spatial 7.3-15 splines 4.2.2
sqldf 0.4-11 SQUAREM 2021.1 stats 4.2.2
stats4 4.2.2 stringi 1.7.12 stringr 1.5.0
survival 3.5-3 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.6 textshaping 0.3.6
tibble 3.1.8 tidyr 1.3.0 tidyselect 1.2.0
tidyverse 1.3.2 timechange 0.2.0 timeDate 4022.108
tinytex 0.44 tools 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.3
utils 4.2.2 uuid 1.1-0 vctrs 0.5.2
viridisLite 0.4.1 vroom 1.6.1 waldo 0.4.0
晶須 0.4.1 withr 2.5.0 xfun 0.37
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 zip 2.2.2

已安裝的 Java 和 Scala 連結庫 （Scala 2.12 叢集版本）

群組識別碼 成品標識碼 版本
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-js-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics stream 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml 同學 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.14.2
com.fasterxml.jackson.core jackson-core 2.14.2
com.fasterxml.jackson.core jackson-databind 2.14.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.14.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.14.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.14.2
com.github.ben-manes.咖啡因 咖啡因 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1 原生
com.github.fommil.netlib native_system java 1.1
com.github.fommil.netlib native_system java 1.1 原生
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1 原生
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1 原生
com.github.luben zstd-jni 1.5.2-5
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.9
com.google.crypto.tink 小 叮噹 1.7.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava 番 石榴 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.214
com.helger 分析器 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.7.0
io.dropwizard.metrics metrics-core 4.2.10
io.dropwizard.metrics metrics-graphite 4.2.10
io.dropwizard.metrics metrics-healthchecks 4.2.10
io.dropwizard.metrics metrics-jetty9 4.2.10
io.dropwizard.metrics metrics-jmx 4.2.10
io.dropwizard.metrics metrics-json 4.2.10
io.dropwizard.metrics metrics-jvm 4.2.10
io.dropwizard.metrics metrics-servlet 4.2.10
io.netty netty-all 4.1.87.Final
io.netty netty-buffer 4.1.87.Final
io.netty netty-codec 4.1.87.Final
io.netty netty-codec-http 4.1.87.Final
io.netty netty-codec-http2 4.1.87.Final
io.netty netty-codec-socks 4.1.87.Final
io.netty netty-common 4.1.87.Final
io.netty netty-handler 4.1.87.Final
io.netty netty-handler-proxy 4.1.87.Final
io.netty netty-resolver 4.1.87.Final
io.netty netty-transport 4.1.87.Final
io.netty netty-transport-classes-epoll 4.1.87.Final
io.netty netty-transport-classes-kqueue 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final
io.netty netty-transport-native-epoll 4.1.87.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.87.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.87.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.87.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx 收藏家 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation 啟用 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction Jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
ml.combust.mleap mleap-databricks-runtime_2.12 v0.20.0-db2
net.java.dev.jna jna 5.8.0
net.razorvine 泡菜 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.29
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow arrow-format 11.0.0
org.apache.arrow arrow-memory-core 11.0.0
org.apache.arrow arrow-memory-netty 11.0.0
org.apache.arrow arrow-vector 11.0.0
org.apache.avro avro 1.11.1
org.apache.avro avro-ipc 1.11.1
org.apache.avro avro-mapred 1.11.1
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator 策展人-食譜 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy 常春藤 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.19.0
org.apache.logging.log4j log4j-api 2.19.0
org.apache.logging.log4j log4j-core 2.19.0
org.apache.logging.log4j log4j-slf4j2-impl 2.19.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.8.3-shaded-protobuf
org.apache.orc orc-mapreduce 1.8.3-shaded-protobuf
org.apache.orc orc-shims 1.8.3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.22
org.apache.yetus audience-annotations 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.19.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.50.v20221201
org.eclipse.jetty jetty-continuation 9.4.50.v20221201
org.eclipse.jetty jetty-http 9.4.50.v20221201
org.eclipse.jetty jetty-io 9.4.50.v20221201
org.eclipse.jetty jetty-jndi 9.4.50.v20221201
org.eclipse.jetty jetty-plus 9.4.50.v20221201
org.eclipse.jetty jetty-proxy 9.4.50.v20221201
org.eclipse.jetty jetty-security 9.4.50.v20221201
org.eclipse.jetty jetty-server 9.4.50.v20221201
org.eclipse.jetty jetty-servlet 9.4.50.v20221201
org.eclipse.jetty jetty-servlets 9.4.50.v20221201
org.eclipse.jetty jetty-util 9.4.50.v20221201
org.eclipse.jetty jetty-util-ajax 9.4.50.v20221201
org.eclipse.jetty jetty-webapp 9.4.50.v20221201
org.eclipse.jetty jetty-xml 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-api 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-client 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-common 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-server 9.4.50.v20221201
org.eclipse.jetty.websocket websocket-servlet 9.4.50.v20221201
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core 澤西-通用 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator hibernate-validator 6.1.7.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains annotations 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.8
org.roaringbitmap RoaringBitmap 0.9.39
org.roaringbitmap 墊片 0.9.39
org.rocksdb rocksdbjni 7.8.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest scalatest 相容 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.6
org.slf4j jul-to-slf4j 2.0.6
org.slf4j slf4j-api 2.0.6
org.threeten threeten-extra 1.7.1
org.tukaani xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.8.4
org.yaml 蛇形 1.33
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1