备注
对此 Databricks Runtime 版本的支持已结束。 有关终止支持日期,请参阅终止支持历史记录。 有关所有受支持的 Databricks Runtime 版本,请参阅 Databricks Runtime 发行说明版本和兼容性。
以下发行说明提供了由 Apache Spark 3.5.0 提供支持的 Databricks Runtime 14.1 的相关信息。
Databricks 于 2023 年 10 月发布了此版本。
提示
若要查看已终止支持 (EoS) 的 Databricks Runtime 版本的发行说明,请参阅终止支持 Databricks Runtime 发行说明。 EoS Databricks Runtime 版本已停用,可能不会更新。
- array_insert() 对于负索引为从 1 开始
- Delta v2 检查点默认启用了液态聚类分析
- 在公共预览版中删除 Delta 表功能
- Delta Sharing:接收者可以对使用删除矢量的共享表执行批处理查询(公共预览版)
- Delta Sharing:接收者可以使用列映射对共享表执行批查询(公共预览版)
- 在公共预览版中从 Unity Catalog 视图进行流式传输
- 公共预览版中的 Apache Pulsar 连接器
- 升级后的 Snowflake 驱动程序
- SQL 会话变量
- SQL 和 Python UDF 的命名参数调用。
- 函数的表参数支持分区和排序。
- 新的和增强的内置 SQL 函数
- 改进了相关子查询的处理
对于正索引和负索引,array_insert
函数是基于 1的。 现在,它会在输入数组的末尾插入索引为 -1 的新元素。 若要还原以前的行为,请将 spark.sql.legacy.negativeIndexInArrayInsert
设置为 true
。
默认情况下,使用液体聚类分析新建的 Delta 表会使用 v2 检查点。 请参阅表与液态群集的兼容性。
现在,可以删除 Delta 表的某些表功能。 当前支持包括删除 deletionVectors
和 v2Checkpoint
。 请参阅删除 Delta Lake 表功能并降级表协议。
Delta Sharing 接收者现在可以对使用删除矢量的共享表执行批处理查询。 请参阅将带有删除向量或列映射的表添加到共享中、读取启用了删除向量或列映射的表和读取启用了删除向量或列映射的表。
增量共享收件人现在可以对使用列映射的共享表执行批处理查询。 请参阅将带有删除向量或列映射的表添加到共享中、读取启用了删除向量或列映射的表和读取启用了删除向量或列映射的表。
现在可以使用结构化流式处理从注册到 Unity 目录的视图执行流式传输读取。 Azure Databricks 仅支持从针对 Delta 表定义的视图流式读取。
现在可以使用结构化流式传输功能从 Azure Databricks 上的 Apache Pulsar 流式传输数据。 请参阅从 Apache Pulsar 进行流式传输。
Snowflake JDBC 驱动程序现在使用版本 3.13.33。
此版本引入了在会话中声明临时变量的功能,可以对该会话进行设置,然后从查询中引用这些变量。 请参阅 变量。
现在可以在 SQL 和 Python UDF 上使用 命名的参数调用。
现在可以使用 PARTITION BY
和 ORDER BY
子句控制在函数调用期间如何将表参数传递给函数。
添加了以下内置函数:
-
from_xml:将 XML
STRING
分析为STRUCT
。 -
schema_of_xml:从 XML
STRING
派生架构。 - session_user:返回已登录用户。
-
try_reflect:如果 Java 方法失败,则返回
NULL
而不是异常。
增强了以下内置函数:
- 模式:对强制确定性结果的可选参数的支持。
-
to_char:新增对
DATE
、TIMESTAMP
和BINARY
的支持。 -
to_varchar:新增对
DATE
、TIMESTAMP
和BINARY
的支持。
扩展了在子查询中处理关联的能力:
- 在相关标量(横向)子查询中处理限制和排序依据。
- 支持相关标量子查询中的窗口函数。
- 支持标量子查询和横向子查询的连接谓词中的相关引用
尝试从非小数类型的 Parquet 列读取小数值时,Photon 会失败。 从 Parquet 读取固定长度字节数组作为字符串时,Photon 也会失败。
- 升级后的 Python 库:
- filelock 已从 3.12.2 升级到 3.12.3
- s3transfer 已从 0.6.1 升级到 0.6.2
- 升级后的 Java 库:
- com.uber.h3 已从 3.7.0 升级到 3.7.3
- io.airlift.aircompressor 已从 0.24 升级到 0.25
- io.delta.delta-sharing-spark_2.12 已从 0.7.1 升级到 0.7.5
- io.netty.netty-all 已从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-buffer 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-codec 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-codec-http 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-codec-http2 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-codec-socks 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-common 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-handler 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-handler-proxy 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-resolver 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-transport 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-transport-classes-epoll 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-transport-classes-kqueue 从 4.1.93.Final 升级到 4.1.96.Final
- io.netty.netty-transport-native-epoll 从 4.1.93.Final-linux-x86_64 升级到 4.1.96.Final-linux-x86_64
- io.netty.netty-transport-native-kqueue 从 4.1.93.Final-osx-x86_64 升级到 4.1.96.Final-osx-x86_64
- io.netty.netty-transport-native-unix-common 已从 4.1.93.Final 升级到 4.1.96.Final
- net.snowflake.snowflake-jdbc 已从 3.13.29 升级到 3.13.33
- org.apache.orc.orc-core 已从 1.9.0-shaded-protobuf 升级到 1.9.1-shaded-protobuf
- org.apache.orc.orc-mapreduce 从 1.9.0-shaded-protobuf 升级到 1.9.1-shaded-protobuf
- org.apache.orc.orc-shims 从 1.9.0 升级到 1.9.1
Databricks Runtime 14.1 包含 Apache Spark 3.5.0。 此版本包括 Databricks Runtime 14.0 (EoS) 中包含的所有 Spark 修复和改进,以及对 Spark 进行的以下其他 bug 修复和改进:
- [SPARK-45088] [ DBRRM-557] 回退 “[SC-142785][python][CONNECT] 使 getitem 在重复的列上工作”
-
[SPARK-43453] [DBRRM-557] 恢复 “[SC-143135][ps] 在
axis=1
concat
时忽略names
MultiIndex
” - [SPARK-45225] [SC-143207][sql] XML:XSD 文件 URL 支持
-
[SPARK-45156] [SC-142782][sql] 在
inputName
错误类中使用反引号将NON_FOLDABLE_INPUT
括起来 - [SPARK-44910] [SC-143082][sql] Encoders.bean 不支持具有泛型类型参数的超级类
-
[SPARK-43453] [SC-143135][ps] 当
names
适用于MultiIndex
时,忽略axis=1
的concat
- [SPARK-44463] [SS][connect] 改进连接流式 Python 辅助角色的错误处理
- [SPARK-44960] [SC-141023][ui] 跨 UI 页面取消转义并包含错误摘要
- [SPARK-44788] [SC-142980][connect][PYTHON][sql] 将 from_xml 和 schema_of_xml 添加到 pyspark、spark connect 和 sql 函数
- [SPARK-44614] [SC-138460][python][CONNECT][3.5] 在 setup.py 中添加缺少的包
- [SPARK-45151] [SC-142861][core][UI] 任务级别线程转储支持
- [SPARK-45056] [SC-142779][python][SS][connect] streamingQueryListener 和 foreachBatch 的终止测试
- [SPARK-45084] [SC-142828][ss] StateOperatorProgress,用于使用准确的有效随机分区号
- [SPARK-44872] [SC-142405][connect] 服务器测试基础设施和 ReattachableExecuteSuite
-
[SPARK-45197] [SC-142984][core] 让
StandaloneRestServer
将JavaModuleOptions
添加到驱动程序 - [SPARK-44404] [SC-139601][sql] 将名称分配到错误类 LEGACY_ERROR_TEMP[1009,1010,1013,1015,1016,1278]
- [SPARK-44647] [SC-142297][sql] 支持 SPJ,其中连接键小于聚类键
-
[SPARK-45088] [SC-142785][python][CONNECT] 使
getitem
能够处理重复的列 -
[SPARK-45128] [SC-142851][sql] 在 Arrow 中支持
CalendarIntervalType
- [SPARK-45130] [SC-142976][connect][ML][python] 避免 Spark Connect ML 模型以更改输入 pandas 数据帧
- [SPARK-45034] [SC-142959][sql] 支持确定性模式函数
- [SPARK-45173] [SC-142931][ui] 删除 UI 中一些不必要的 sourceMapping 文件
-
[SPARK-45162] [SC-142781][sql] 支持通过
call_function
构造的映射和数组参数 - [SPARK-45143] [SC-142840][python][CONNECT] 使 PySpark 与 PyArrow 13.0.0 兼容
-
[SPARK-45174] [SC-142837][core] 支持
spark.deploy.maxDrivers
-
[SPARK-45167] [SC-142956][connect][PYTHON] Python 客户端必须调用
release_all
- [SPARK-36191] [SC-142777][sql] 在相关标量(横向)子查询中处理限制和排序依据
- [SPARK-45159] [SC-142829][python] 仅在必要时处理命名参数
- [SPARK-45133] [SC-142512][connect] 使 Spark Connect 查询在完成最后一个结果任务时完成
- [SPARK-44801] [SC-140802][sql][UI] 在侦听器和 UI 中捕获分析失败的查询
- [SPARK-45139] [SC-142527][sql] 添加 DatabricksDialect 来处理 SQL 类型转换
-
[SPARK-45157] [SC-142546][sql] 避免在
if
中重复[On|Off|HeapColumnVector
检查 - [SPARK-45077] 还原“[SC-142069][ui] 将 dagre-d3.js 从 04.3 升级到 0.6.4”
- [SPARK-45145] [SC-142521][example] 添加 JavaSparkSQLCli 示例
-
[SPARK-43295] 还原“支持
DataFrameGroupBy.sum
字符串类型列的[SC-142254][ps]” - [SPARK-44915] [ SC-142383][core] 在恢复之前验证重新装载 PVC 的随机数据的校验和
-
[SPARK-45147] [SC-142524][core] 删除
System.setSecurityManager
用法 -
[SPARK-45104] [SC-142206][ui] 将
graphlib-dot.min.js
升级到 1.0.2 -
[SPARK-44238] [SC-141606][core][SQL] 引入一个新的
readFrom
方法,其中包含用于BloomFilter
的字节数组输入 -
[SPARK-45060] [SC-141742][sql] 修复
to_char()
中NULL
格式的内部错误 -
[SPARK-43252] [SC-142381][sql] 将错误类
_LEGACY_ERROR_TEMP_2016
替换为内部错误 - [SPARK-45069] [SC-142279][sql] SQL 变量应始终在外部引用后解析
- [SPARK-44911] [SC-142388][sql] 创建包含无效列的 Hive 表应返回错误类
- [SPARK-42754] [SC-125567][sql][UI] 修复嵌套 SQL 执行中的后向兼容性问题
-
[SPARK-45121] [SC-142375][connect][PS] 对 Spark Connect 支持
Series.empty
。 - [SPARK-44805] [SC-142203][sql] getBytes/getShorts/getInts/ 等应该在有字典的列矢量中工作
-
[SPARK-45027] [SC-142248][python] 隐藏
pyspark.sql.functions
中的内部函数/变量以防止自动完成 -
[SPARK-45073] [SC-141791][ps][CONNECT] 将
LastNotNull
替换为Last(ignoreNulls=True)
- [SPARK-44901] [ SC-141676][sql] 手动回送:在 Python UDTF“analyze”方法中添加 API 以返回分区/排序表达式
-
[SPARK-45076] [SC-141795][ps] 切换到内置
repeat
函数 - [SPARK-44162] [SC-141605][core] 在 Spark 指标中支持 G1GC
- [SPARK-45053] [SC-141733][python][MINOR] Python 版本不匹配的日志改进
-
[SPARK-44866] [SC-142221][sql] 添加
SnowflakeDialect
以正确处理 BOOLEAN 类型 -
[SPARK-45064] [SC-141775][python][CONNECT] 在
scale
中添加缺少的ceil/ceiling
参数 -
[SPARK-45059] [SC-141757][connect][PYTHON] 将
try_reflect
函数添加到 Scala 和 Python -
[SPARK-43251] [SC-142280][sql] 将错误类
_LEGACY_ERROR_TEMP_2015
替换为内部错误 - [SPARK-45052] [SC-141736][sql][PYTHON][connect] 使函数别名输出列名称与 SQL 一致
- [SPARK-44239] [SC-141502][sql] 重置矢量时由大矢量分配可用内存
-
[SPARK-43295] [SC-142254][ps] 对
DataFrameGroupBy.sum
支持字符串类型列 - [SPARK-45080] [SC-142062][ss] 显式调用 DSv2 流式处理数据源中对列式的支持
- [SPARK-45036] [SC-141768][sql] SPJ:简化处理部分群集分布的逻辑
- [SPARK-45077] [SC-142069][ui] 将 dagre-d3.js 从 0.4.3 升级到 0.6.4
-
[SPARK-45091] [SC-142020][python][CONNECT][sql] 函数
floor/round/bround
接受列类型scale
-
[SPARK-45090] [SC-142019][python][CONNECT]
DataFrame.{cube, rollup}
支持列序号 -
[SPARK-44743] [SC-141625][sql] 添加
try_reflect
函数 - [SPARK-45086] [SC-142052][ui] 显示线程锁哈希码的十六进制
- [SPARK-44952] [SC-141644][sql][PYTHON] 支持聚合 Pandas UDF 中的命名参数
-
[SPARK-44987] [SC-141552][sql] 为错误类
_LEGACY_ERROR_TEMP_1100
指定名称 -
[SPARK-45032] [SC-141730][connect] 修复与
Top-level wildcard is not allowed and will error under -Xsource:3
相关的编译警告 - [SPARK-45048] [SC-141629][connect] 添加针对 Python 客户端和可附加执行的附加测试
- [SPARK-45072] [SC-141807][connect] 修复二元类的外部范围
-
[SPARK-45033] [SC-141759][sql] 通过参数化
sql()
支持映射 -
[SPARK-45066] [SC-141772][sql][PYTHON][connect] 使函数
repeat
重复接受列类型n
- [SPARK-44860] [SC-141103][sql] 添加 SESSION_USER 函数
-
[SPARK-45074] [SC-141796][python][CONNECT]
DataFrame.{sort, sortWithinPartitions}
支持列序号 -
[SPARK-45047] [SC-141774][python][CONNECT]
DataFrame.groupBy
支持序号 - [SPARK-44863] [SC-140798][ui] 在 Spark UI 中添加一个按钮,以将线程转储下载为 txt
-
[SPARK-45026] [SC-141604][connect]
spark.sql
应该支持与 arrow 不兼容的数据类型 -
[SPARK-44999] [SC-141145][core] 重构
ExternalSorter
以减少调用shouldPartition
时对getPartition
的检查 -
[SPARK-42304] [SC-141501][sql] 将
_LEGACY_ERROR_TEMP_2189
重命名为GET_TABLES_BY_TYPE_UNSUPPORTED_BY_HIVE_VERSION
- [SPARK-43781] [SC-139450][sql] 修复从同一源派生两个数据集时的 IllegalStateException
- [SPARK-45018] [SC-141516][python][CONNECT] 将 CalendarIntervalType 添加到 Python 客户端
- [SPARK-45024] [SC-141513][python][CONNECT] 筛选出会话创建中的一些配置
-
[SPARK-45017] [SC-141508][python] 将
CalendarIntervalType
添加到 PySpark - [SPARK-44720] [SC-139375][connect] 使数据集使用编码器而不是 AgnosticEncoder
- [SPARK-44982] [SC-141027][connect] 在创建过程中将配置应用于sparksession
- [SPARK-44839] [SC-140900][ss][CONNECT] 在用户尝试序列化 Spark 会话时优化错误日志记录
- [SPARK-44865] [SC-140905][ss] 使 StreamingRelationV2 支持元数据列
- [SPARK-45001] [SC-141141][python][CONNECT] 实现 DataFrame.foreachPartition
- [SPARK-44497] [SC-141017][webui] 在任务表中显示任务分区 ID
- [SPARK-45006] [SC-141143][ui] 对时间线 x 轴使用其他 UI 日期元素的相同日期格式
- [SPARK-45000] [SC-141135][python][CONNECT] 实施 DataFrame.foreach
- [SPARK-44967] [SC-141137][sql][CONNECT] 单元应先考虑使用 Boolean for TreeNodeTag
-
[SPARK-44993] [SC-141088][core] 通过重用
ShuffleChecksumUtils.compareChecksums
来添加ShuffleChecksumTestHelp.compareChecksums
- [SPARK-44807] [SC-140176][connect] 将 Dataset.metadataColumn 添加到 Scala 客户端
-
[SPARK-44965] [SC-141098][python] 隐藏
pyspark.sql.functions
中的内部函数/变量 -
[SPARK-44983] [SC-141030][sql] 通过
to_char
将二进制转换为字符串,格式为:hex
、base64
、utf-8
- [SPARK-44980] [DBRRM-462][sc-141024][PYTHON][connect] 修复继承的命名元组以在 createDataFrame 中工作
- [SPARK-44985] [SC-141033][core] 对任务 reaper threadDump 使用 toString 而不是 stacktrace
-
[SPARK-44984] [SC-141028][python][CONNECT] 从 DataFrame 中删除
_get_alias
- [SPARK-44975] [SC-141013][sql] 删除已解析的 BinaryArithmetic 无用替代
-
[SPARK-44969] [SC-140957][sql] 在
ArrayInsert
中重用ArrayAppend
- [SPARK-44549] [SC-140714][sql] 支持相关标量子查询中的窗口函数
-
[SPARK-44938] [SC-140811][sql] 将默认值
spark.sql.maxSinglePartitionBytes
更改为 128m - [SPARK-44918] [SC-140816][sql][PYTHON] 支持标量 Python/Pandas UDF 中的命名参数
-
[SPARK-44966] [SC-140907][core][CONNECT] 将从未更改的
var
更改为val
- [SPARK-41471] [SC-140804][sql] 当仅联接的一端为 KeyGroupedPartitioning 时,减少 Spark 随机
- [SPARK-44214] [SC-140528][core] 支持 Spark 驱动程序实时日志 UI
- [SPARK-44861] [SC-140716][connect] jsonignore SparkListenerConnectOperationStarted.planRequest
- [SPARK-44776] [SC-140519][connect] 将 ProducedRowCount 添加到 SparkListenerConnectOperationFinished
-
[SPARK-42017] [SC-140765][python][CONNECT]
df['col_name']
应验证列名 - [SPARK-40178] [SC-140433][sql][COONECT] 轻松支持 PySpark 和 R 的联合提示
-
[SPARK-44840] [SC-140593][sql] 将
array_insert()
的负索引调整为从 1 开始 - [SPARK-44939] [SC-140778][r] 在 SparkR SystemRequirements 中支持 Java 21
- [SPARK-44936] [SC-140770][core] 当 Spark HybridStore 达到内存限制时简化日志
- [SPARK-44908] [SC-140712][ml][CONNECT] 修复交叉验证程序 foldCol param 功能
- [SPARK-44816] [SC-140717][connect] 在找不到 UDF 类时改进错误消息
- [SPARK-44909] [SC-140710][ml] 当 torch 分发服务器日志流式处理服务器不可用时,跳过启动它
- [SPARK-44920] [SC-140707][core] 在 TransportClientFactory.createClient() 中使用 await() 而不是 awaitUninterruptibly()
- [SPARK-44905] [SC-140703][sql] 有状态的 lastRegex 导致 regexp_replace 的 eval 出现 NullPointerException
- [SPARK-43987] [SC-139594][shuffle] 将 finalizeShuffleMerge 处理分离到专用线程池
- [SPARK-42768] [SC-140549][sql] 默认启用缓存计划应用 AQE
-
[SPARK-44741] [SC-139447][core] 在
StatsdSink
中支持基于正则表达式的 MetricFilter - [SPARK-44751] [SC-140532][sql] XML FileFormat 接口实现
-
[SPARK-44868] [SC-140438][sql] 通过
to_char
/to_varchar
将日期/时间转换为字符串 - [SPARK-44748] [ SC-140504][sql] UDTF TABLE 参数中 PARTITION BY 子句的查询执行
- [SPARK-44873] [SC-140427] 在 Hive 客户端中支持具有嵌套列的更改视图
- [SPARK-44876] [SC-140431][python] 修复 Spark Connect 上经过 Arrow 优化的 Python UDF
- [SPARK-44520] [SC-137845][sql] 将术语 UNSUPPORTED_DATA_SOURCE_FOR_DIRECT_QUERY 替换为 UNSUPPORTED_DATASOURCE_FOR_DIRECT_QUERY,并披露根 AE
-
[SPARK-42664] [SC-139769][connect] 支持
bloomFilter
的DataFrameStatFunctions
函数 -
[SPARK-43567] [SC-139227][ps] 支持
use_na_sentinel
的factorize
- [SPARK-44859] [SC-140254][ss] 修复结构化流式处理文档中不正确的属性名称
- [SPARK-44822] [SC-140182][python][SQL] 默认情况下将 Python UDTF 设为非确定性
- [SPARK-44731] [SC-139524][python][CONNECT] 使 TimestampNTZ 适用于 Python Spark Connect 中的文本
- [SPARK-44836] [SC-140180][python] 重构 Arrow Python UDTF
- [SPARK-44714] [SC-139238] 使用 having 放宽了关于查询的 LCA 解析限制
- [SPARK-44749] [SC-139664][sql][PYTHON] 支持 Python UDTF 中的命名参数
- [SPARK-44737] [SC-139512][sql][UI] 对于 SQL 选项卡上的非 SparkThrowables,不应在 SQL 页上显示 json 格式错误
- [SPARK-44665] [SC-139307][python] 添加对 pandas DataFrame assertDataFrameEqual 的支持
- [SPARK-44736] [SC-139622][connect] 向 Spark Connect Scala 客户端添加 Dataset.explode
- [SPARK-44732] [SC-139422][sql] 内置 XML 数据源支持
- [SPARK-44694] [SC-139213][python][CONNECT] 重构活动会话并将其公开为 API
- [SPARK-44652] [SC-138881] 当只有一个 df 为 None 时引发错误
- [SPARK-44562] [SC-138824][sql] 在子查询批处理中添加 OptimizeOneRowRelationSubquery
- [SPARK-44717] [SC-139319][python][PS] 重采样时遵循 TimestampNTZ
- [SPARK-42849] [SC-139365] [SQL] 会话变量
-
[SPARK-44236] [SC-139239][sql] 在将
spark.sql.codegen.factoryMode
设置为 NO_CODEGEN 时禁用 WholeStageCodegen -
[SPARK-44695] [SC-139316][python] 改进
DataFrame.toDF
的错误消息 -
[SPARK-44680] [SC-139234][sql] 改进
DEFAULT
中的参数错误 - [SPARK-43402] [SC-138321][sql] FileSourceScanExec 支持使用标量子查询向下推送数据筛选器
- [SPARK-44641] [SC-139216][sql] 未触发 SPJ 时,某些情况下结果不正确
-
[SPARK-44689] [SC-139219][connect] 使函数
SparkConnectPlanner#unpackScalarScalaUDF
的异常处理更加通用 -
[SPARK-41636] [SC-139061][sql] 确保
selectFilters
按确定性顺序返回谓词 -
[SPARK-44132] [SC-139197][sql] 具体化联接列名的
Stream
以避免 codegen 失败 -
[SPARK-42330] [SC-138838][sql] 将名称
RULE_ID_NOT_FOUND
分配到错误类_LEGACY_ERROR_TEMP_2175
- [SPARK-44683] [ SC-139214][ss] 日志记录级别未正确传递到 RocksDB 状态存储提供程序
-
[SPARK-44658] [SC-138868][core]
ShuffleStatus.getMapStatus
应返回None
而不是Some(null)
- [SPARK-44603] [SC-138353] 将 pyspark.testing 添加到 setup.py
- [SPARK-44252] [SC-137505][ss] 定义新的错误类并申请从 DFS 加载状态失败的情况
- [SPARK-29497] [DBRRM-396][sc-138477][CONNECT] 在 UDF 不可反序列化时抛出错误。
- [SPARK-44624] [ DBRRM-396][sc-138900][CONNECT] 在初始请求未到达服务器的情况下重试 ExecutePlan
- [SPARK-41400] [DBRRM-396][sc-138287][CONNECT] 删除 Connect Client Catalyst 依赖项
- [SPARK-44059] [SC-138833][sql] 为名为 argumnts 的 SQL 添加更好的错误消息
-
[SPARK-44620] [SC-138831][sql][PS][connect] 使
ResolvePivot
保留Plan_ID_TAG
- [SPARK-43838] [SC-137413][sql] 修复具有 HAVING 子句的单个表上的子查询无法优化的问题
- [SPARK-44555] [SC-138820][sql] 使用 checkError() 检查命令套件中的异常并分配一些错误类名称
- [SPARK-44280] [SC-138821][sql] 在 JDBCDialect API 中添加 convertJavaTimestampToTimestamp
-
[SPARK-44602] [SC-138337][sql][CONNECT][ps] 使
WidenSetOperationTypes
保留Plan_ID_TAG
- [SPARK-42941] [SC-138389][ss][CONNECT] Python StreamingQueryListener
- [SPARK-43838] 还原“[SC-137413][sql] 修复单个表上的子查询问题...”
- [SPARK-44538] [SC-138178][connect][SQL] 恢复 Row.jsonValue 及其相关方法
- [SPARK-44421] [SC-138434][spark-44423][CONNECT] Spark Connect 中的可重新附加执行
- [SPARK-43838] [SC-137413][sql] 修复具有 HAVING 子句的单个表上的子查询无法优化的问题
- [SPARK-44587] [SC-138315][sql][CONNECT] 增加 protobuf 封送器递归限制
- [SPARK-44605] [SC-138338][core] 优化内部 ShuffleWriteProcessor API
- [SPARK-44394] [SC-138291][connect][WEBUI] 为 Spark Connect 添加 Spark UI 页面
- [SPARK-44585] [SC-138286][mllib] 修复 MLLib RankingMetrics ndcgAk 中的警告条件
- [SPARK-44198] [SC-138137][core] 支持将日志级别传播到执行程序
- [SPARK-44454] [SC-138071][sql][HIVE] HiveShim getTablesByType 支持回退
- [SPARK-44425] [SC-138135][connect] 验证用户提供的 sessionId 是否为 UUID
-
[SPARK-43611] [SC-138051][sql][PS][connect] 使
ExtractWindowExpressions
保留PLAN_ID_TAG
- [SPARK-44560] [SC-138117][python][CONNECT] 改进 Arrow Python UDF 的测试和文档
- [SPARK-44482] [SC-138067][connect] Connect 服务器应可以指定绑定地址
- [SPARK-44528] [SC-138047][connect] 支持对 Connect 数据帧正确使用 hasattr()
- [SPARK-44525] [SC-138043][sql] 在找不到调用方法时改进错误消息
- [SPARK-44355] [SC-137878][sql] 将 WithCTE 移动到命令查询中
Databricks 支持在过去 2 年中发布的 ODBC/JDBC 驱动程序。 请下载最近发布的驱动程序并升级(下载 ODBC,下载 JDBC)。
请参阅 Databricks Runtime 14.1 维护更新。
- 操作系统:Ubuntu 22.04.3 LTS
- Java:Zulu 8.72.0.17-CA-linux64
- Scala:2.12.15
- Python:3.10.12
- R:4.3.1
- Delta Lake:3.0.0
图书馆 | 版本 | 图书馆 | 版本 | 图书馆 | 版本 |
---|---|---|---|---|---|
anyio | 3.5.0 | argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 |
asttokens | 2.0.5 | 属性 | 22.1.0 | 回调 | 0.2.0 |
beautifulsoup4 | 4.11.1 | 黑色 | 22.6.0 | 漂白剂 | 4.1.0 |
闪烁器 | 1.4 | boto3 | 1.24.28 | botocore | 1.27.96 |
certifi | 2022.12.7 | cffi | 1.15.1 | chardet | 4.0.0 |
charset-normalizer (字符集正常化工具) | 2.0.4 | 点击 | 8.0.4 | 通讯 | 0.1.2 |
contourpy | 1.0.5 | 密码学 | 39.0.1 | 骑行者 | 0.11.0 |
Cython | 0.29.32 | Databricks软件开发工具包 (databricks-sdk) | 0.1.6 | dbus-python | 1.2.18 |
debugpy | 1.6.7 | 装饰师 | 5.1.1 | defusedxml | 0.7.1 |
distlib | 0.3.7 | docstring-to-markdown | 0.11 | 入口点 | 0.4 |
正在执行 | 0.8.3 | 各个方面概述 | 1.1.1 | fastjsonschema | 2.18.0 |
文件锁 (filelock) | 3.12.3 | fonttools(字体工具) | 4.25.0 | GCC 运行时库 | 1.10.0 |
googleapis-common-protos | 1.60.0 | grpcio | 1.48.2 | grpcio-status | 1.48.1 |
httplib2 | 0.20.2 | idna | 3.4 | importlib-metadata | 4.6.4 |
ipykernel | 6.25.0 | ipython | 8.14.0 | ipython-genutils(IPython通用工具) | 0.2.0 |
ipywidgets | 7.7.2 | jedi | 0.18.1 | 吉普尼 | 0.7.1 |
Jinja2 | 3.1.2 | jmespath | 0.10.0 | joblib | 1.2.0 |
jsonschema | 4.17.3 | Jupyter客户端 | 7.3.4 | Jupyter 服务器 | 1.23.4 |
jupyter_core(Jupyter核心) | 5.2.0 | jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 |
钥匙圈 | 23.5.0 | kiwisolver | 1.4.4 | launchpadlib | 1.10.16 |
lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 | lxml | 4.9.1 |
MarkupSafe | 2.1.1 | matplotlib | 3.7.0 | matplotlib-inline | 0.1.6 |
麦卡贝 | 0.7.0 | mistune | 0.8.4 | more-itertools | 8.10.0 |
mypy-extensions | 0.4.3 | nbclassic | 0.5.2 | nbclient | 0.5.13 |
nbconvert | 6.5.4 | nbformat | 5.7.0 | nest-asyncio | 1.5.6 |
nodeenv | 1.8.0 | 笔记本 | 6.5.2 | notebook_shim | 0.2.2 |
numpy | 1.23.5 | oauthlib | 3.2.0 | 包装 | 22.0 |
熊猫 | 1.5.3 | pandocfilters | 1.5.0 | 帕尔索 | 0.8.3 |
pathspec | 0.10.3 | 替罪羊 | 0.5.3 | pexpect | 4.8.0 |
pickleshare | 0.7.5 | 枕头 | 9.4.0 | 果仁 | 22.3.1 |
platformdirs | 2.5.2 | plotly | 5.9.0 | Pluggy (Python库) | 1.0.0 |
prometheus-client | 0.14.1 | prompt-toolkit | 3.0.36 | protobuf | 4.24.0 |
psutil | 5.9.0 | psycopg2 | 2.9.3 | ptyprocess | 0.7.0 |
pure-eval | 0.2.2 | pyarrow | 8.0.0 | Python代码解析器 | 2.21 |
pydantic | 1.10.6 | pyflakes | 3.0.1 | Pygments | 2.11.2 |
PyGObject | 3.42.1 | PyJWT | 2.3.0 | pyodbc | 4.0.32 |
pyparsing | 3.0.9 | pyright | 1.1.294 | pyrsistent(持久性,类似于 persistent 的 Python 包) | 0.18.0 |
python-dateutil | 2.8.2 | python-lsp-jsonrpc | 1.0.0 | python-lsp-server | 1.7.1 |
pytoolconfig | 1.2.5 | Python时区库pytz | 2022年7月 | pyzmq | 23.2.0 |
请求 | 2.28.1 | 绳子 | 1.7.0 | s3transfer | 0.6.2 |
scikit-learn | 1.1.1 | seaborn | 0.12.2 | SecretStorage | 3.3.1 |
Send2Trash | 1.8.0 | setuptools | 65.6.3 | 6 | 1.16.0 |
思尼菲欧 | 1.2.0 | 滤汤器 | 2.3.2.post1 | ssh-import-id | 5.11 |
堆栈数据 | 0.2.0 | statsmodels | 0.13.5 | 毅力 | 8.1.0 |
完成 | 0.17.1 | threadpoolctl | 2.2.0 | tinycss2 | 1.2.1 |
tokenize-rt | 4.2.1 | tomli | 2.0.1 | 龙卷风 | 6.1 |
Traitlets | 5.7.1 | typing_extensions | 4.4.0 | ujson | 5.4.0 |
无人值守升级 | 0.1 | urllib3 | 1.26.14 | virtualenv | 20.16.7 |
wadllib | 1.3.6 | wcwidth | 0.2.5 | Web编码 | 0.5.1 |
WebSocket客户端 | 0.58.0 | whatthepatch | 1.0.2 | 轮子 | 0.38.4 |
widgetsnbextension | 3.6.1 | yapf | 0.31.0 | 齐普 | 1.0.0 |
SciPy | 1.10.1 |
R 库安装自 2023-02-10 的 Posit Package Manager CRAN 快照。
图书馆 | 版本 | 图书馆 | 版本 | 图书馆 | 版本 |
---|---|---|---|---|---|
箭头 | 12.0.1 | askpass | 1.1 | 断言 | 0.2.1 |
向后移植 | 1.4.1 | 基础 | 4.3.1 | base64enc | 0.1-3 |
比特 | 4.0.5 | bit64 | 4.0.5 | 团状物 | 1.2.4 |
靴子 | 1.3-28 | 酿造 | 1.0-8 | 活力 | 1.1.3 |
扫帚 | 1.0.5 | bslib | 0.5.0 | 卡齐姆 | 1.0.8 |
callr | 3.7.3 | 文本光标 | 6.0-94 | cellranger | 1.1.0 |
chron | 2.3-61 | 类 | 7.3-22 | cli | 3.6.1 |
剪辑器 | 0.8.0 | 时钟 | 0.7.0 | 集群 | 2.1.4 |
codetools | 0.2至19 | 色彩空间 | 2.1-0 | commonmark | 1.9.0 |
编译器 | 4.3.1 | 配置 | 0.3.1 | 纠结 | 1.2.0 |
cpp11 | 0.4.4 | 蜡笔 | 1.5.2 | 资格证书 | 1.3.2 |
卷曲 | 5.0.1 | data.table | 1.14.8 | 数据集 | 4.3.1 |
DBI | 1.1.3 | dbplyr | 2.3.3 | desc | 1.4.2 |
devtools | 2.4.5 | 示意图 | 1.6.5 | diffobj | 0.3.5 |
摘要 | 0.6.33 | 向下照明 | 0.4.3 | dplyr | 1.1.2 |
dtplyr | 1.3.1 | e1071 | 1.7-13 | 省略 | 0.3.2 |
评价 | 0.21 | fansi | 1.0.4 | 颜色 | 2.1.1 |
fastmap | 1.1.1 | fontawesome | 0.5.1 | 猫用 | 1.0.0 |
foreach | 1.5.2 | 外国 | 0.8-82 | 锻造 | 0.2.0 |
fs | 1.6.2 | 未来 | 1.33.0 | future.apply | 1.11.0 |
漱口 | 1.5.1 | 泛 型 | 0.1.3 | 格尔特 | 1.9.2 |
ggplot2 | 3.4.2 | gh | 1.4.0 | gitcreds | 0.1.2 |
glmnet | 4.1-7 | 全局 | 0.16.2 | 胶水 | 1.6.2 |
googledrive | 2.1.1 | googlesheets4 | 1.1.1 | gower | 1.0.1 |
图形 | 4.3.1 | grDevices | 4.3.1 | “业务流程参数” 网格 | 4.3.1 |
gridExtra | 2.3 | gsubfn | 0.7 | gtable | 0.3.3 |
安全帽 | 1.3.0 | 避风港 | 2.5.3 | 更高的 | 0.10 |
赫姆斯 | 1.1.3 | HTML工具 | 0.5.5 | HTML小插件 | 1.6.2 |
httpuv | 1.6.11 | httr | 1.4.6 | httr2 | 0.2.3 |
ids | 1.0.1 | ini | 0.3.1 | ipred | 0.9-14 |
isoband | 0.2.7 | 迭代器 | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.7 | KernSmooth | 2.23-21 | knitr | 1.43 |
标记 | 0.4.2 | 以后 | 1.3.1 | 格子 | 0.21-8 |
熔岩 | 1.7.2.1 | 生命周期 | 1.0.3 | listenv | 0.9.0 |
lubridate | 1.9.2 | magrittr | 2.0.3 | markdown | 1.7 |
质量 | 7.3-60 | 矩阵 | 1.5-4.1 | 记忆化 | 2.0.1 |
方法 | 4.3.1 | mgcv | 1.8-42 | 默剧 | 0.12 |
迷你用户界面 | 0.1.1.1 | ModelMetrics | 1.2.2.2 | modelr | 0.1.11 |
蒙塞尔 | 0.5.0 | nlme | 3.1-162 | nnet | 7.3-19 |
numDeriv | 2016年8月至1月1日 | openssl(开放SSL) | 2.0.6 | 平行 | 4.3.1 |
并行地 | 1.36.0 | 柱子 | 1.9.0 | pkgbuild (软件包构建工具) | 1.4.2 |
pkgconfig | 2.0.3 | pkgdown | 2.0.7 | pkgload | 1.3.2.1 |
普洛格 | 0.2.0 | 普莱尔 | 1.8.8 | 赞美 | 1.0.0 |
prettyunits | 1.1.1 | pROC | 1.18.4 | processx | 3.8.2 |
prodlim | 2023年3月31日 | profvis | 0.3.8 | 进展 | 1.2.2 |
progressr | 0.13.0 | 承诺 | 1.2.0.1 | 原型 (proto) | 1.0.0 |
代理服务器 | 0.4-27 | 附注 (ps) | 1.7.5 | purrr | 1.0.1 |
r2d3 | 0.2.6 | R6 | 2.5.1 | ragg | 1.2.5 |
随机森林 (randomForest) | 4.7-1.1 | rappdirs | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-3 | Rcpp | 1.0.11 | RcppEigen | 0.3.3.9.3 |
readr | 2.1.4 | readxl | 1.4.3 | 食谱 | 1.0.6 |
重赛 | 1.0.1 | rematch2 | 2.1.2 | 遥控器 | 2.4.2 |
可复现示例 | 2.0.2 | reshape2 | 1.4.4 | rlang | 1.1.1 |
rmarkdown | 2.23 | RODBC | 1.3-20 | roxygen2 | 7.2.3 |
rpart | 4.1.19 | rprojroot | 2.0.3 | Rserve | 1.8-11 |
RSQLite | 2.3.1 | rstudioapi | 0.15.0 | rversions | 2.1.2 |
rvest | 1.0.3 | sass | 0.4.6 | 磅秤 | 1.2.1 |
selectr | 0.4-2 | 会话信息 | 1.2.2 | 形状 | 1.4.6 |
光亮 | 1.7.4.1 | sourcetools | 0.1.7-1 | sparklyr(用于R的可视化和数据处理工具包) | 1.8.1 |
SparkR | 3.5.0 | 空间 | 7.3-15 | 样 条 | 4.3.1 |
sqldf | 0.4-11 | SQUAREM | 2021.1 | 统计数据 | 4.3.1 |
统计数据4 | 4.3.1 | stringi | 1.7.12 | stringr | 1.5.0 |
生存 | 3.5-5 | sys | 3.4.2 | systemfonts | 1.0.4 |
tcltk | 4.3.1 | testthat | 3.1.10 | 文本整理 | 0.3.6 |
tibble | 3.2.1 | tidyr | 1.3.0 | tidyselect | 1.2.0 |
tidyverse | 2.0.0 | 时间变更 | 0.2.0 | 时间日期 | 4022.108 |
tinytex | 0.45 | 工具 | 4.3.1 | tzdb | 0.4.0 |
URL检查器 | 1.0.1 | usethis | 2.2.2 | utf8 | 1.2.3 |
utils | 4.3.1 | UUID(通用唯一识别码) | 1.1-0 | vctrs | 0.6.3 |
viridisLite | 0.4.2 | vroom | 1.6.3 | 瓦尔多 | 0.5.1 |
晶 须 | 0.4.1 | withr | 2.5.0 | xfun | 0.39 |
xml2 | 1.3.5 | xopen | 1.0.0 | xtable | 1.8-4 |
yaml | 2.3.7 | 压缩包 | 2.3.0 |
群组标识符 | 工件编号 | 版本 |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | Amazon Kinesis 客户端 | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.390 |
com.amazonaws | AWS Java SDK CloudFront | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.390 |
com.amazonaws | AWS Java SDK 云搜索 | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.390 |
com.amazonaws | AWS Java SDK CodeDeploy(AWS Java 软件开发工具包 CodeDeploy) | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.390 |
com.amazonaws | aws-java-sdk-config(AWS Java SDK 配置) | 1.12.390 |
com.amazonaws | aws-java-sdk-core (AWS Java软件开发工具包核心) | 1.12.390 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.390 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.390 |
com.amazonaws | aws-java-sdk-directory | 1.12.390 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.390 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.390 |
com.amazonaws | aws-java-sdk-ecs | 1.12.390 |
com.amazonaws | aws-java-sdk-efs | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticbeanstalk(AWS Java 开发工具包 - Elastic Beanstalk) | 1.12.390 |
com.amazonaws | aws-java-sdk-弹性负载均衡 | 1.12.390 |
com.amazonaws | aws-java-sdk-elastictranscoder(AWS Java SDK弹性转码器) | 1.12.390 |
com.amazonaws | aws-java-sdk-emr | 1.12.390 |
com.amazonaws | AWS Java SDK Glacier | 1.12.390 |
com.amazonaws | aws-java-sdk-glue | 1.12.390 |
com.amazonaws | aws-java-sdk-iam | 1.12.390 |
com.amazonaws | AWS Java SDK 导入导出 (aws-java-sdk-importexport) | 1.12.390 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.390 |
com.amazonaws | AWS Java 软件开发工具包 - KMS | 1.12.390 |
com.amazonaws | aws-java-sdk-lambda | 1.12.390 |
com.amazonaws | aws-java-sdk-logs(AWS Java开发包日志) | 1.12.390 |
com.amazonaws | AWS-Java-SDK-机器学习 | 1.12.390 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.390 |
com.amazonaws | aws-java-sdk-rds | 1.12.390 |
com.amazonaws | aws-java-sdk-redshift | 1.12.390 |
com.amazonaws | aws-java-sdk-route53 | 1.12.390 |
com.amazonaws | aws-java-sdk-s3 | 1.12.390 |
com.amazonaws | aws-java-sdk-ses | 1.12.390 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.390 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.390 |
com.amazonaws | aws-java-sdk-sns | 1.12.390 |
com.amazonaws | aws-java-sdk-sqs | 1.12.390 |
com.amazonaws | aws-java-sdk-ssm | 1.12.390 |
com.amazonaws | AWS Java SDK 存储网关 | 1.12.390 |
com.amazonaws | aws-java-sdk-sts | 1.12.390 |
com.amazonaws | AWS Java SDK支持 | 1.12.390 |
com.amazonaws | AWS-Java-SDK-SWF-库 | 1.11.22 |
com.amazonaws | aws-java-sdk-workspaces | 1.12.390 |
com.amazonaws | jmespath-java | 1.12.390 |
com.clearspring.analytics | 溪流 | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | databricks-sdk-java | 0.7.0 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo遮阳 | 4.0.2 |
com.esotericsoftware | minlog | 1.3.0 |
com.fasterxml | 同学 | 1.3.4 |
com.fasterxml.jackson.core | jackson-annotations(Jackson注解库) | 2.15.2 |
com.fasterxml.jackson.core | jackson-core | 2.15.2 |
com.fasterxml.jackson.core | jackson-databind | 2.15.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-joda(杰克逊数据类型-Joda) | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.15.1 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
com.github.ben-manes.caffeine | 咖啡因 | 2.9.3 |
com.github.fommil | jniloader | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1-原住民 |
com.github.fommil.netlib | 原生系统-Java | 1.1 |
com.github.fommil.netlib | 原生系统-Java | 1.1-原住民 |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1-原住民 |
com.github.fommil.netlib | netlib-本地系统-linux-x86_64 | 1.1-原住民 |
com.github.luben | zstd-jni | 1.5.5-4 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.10.1 |
com.google.crypto.tink | 丁克 | 1.9.0 |
com.google.errorprone | 易出错的注释 | 2.10.0 |
com.google.flatbuffers | flatbuffers-java | 1.12.0 |
com.google.guava | 番石榴 | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.helger | 分析器 | 1.1.1 |
com.jcraft | jsch | 0.1.55 |
com.jolbox | bonecp | 0.8.0.RELEASE |
com.lihaoyi | 源代码_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
com.ning | compress-lzf | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.sun.xml.bind | jaxb-core | 2.2.11 |
com.sun.xml.bind | jaxb-impl | 2.2.11 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | chill-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | 配置 | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.3 |
com.univocity | univocity-parsers解析器 | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec(公共编解码器) | commons-codec(公共编解码器) | 1.16.0 |
commons-collections (通用集合库) | commons-collections (通用集合库) | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.5 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.13.0 |
commons-lang | commons-lang | 2.6 |
commons-logging | commons-logging | 1.1.3 |
commons-pool | commons-pool | 1.5.4 |
dev.ludovic.netlib | arpack | 3.0.3 |
dev.ludovic.netlib | BLAS | 3.0.3 |
dev.ludovic.netlib | lapack | 3.0.3 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | 空气压缩机 | 0.25 |
io.delta | delta-sharing-spark_2.12 | 0.7.5 |
io.dropwizard.metrics | 指标标注 | 4.2.19 |
io.dropwizard.metrics | metrics-core | 4.2.19 |
io.dropwizard.metrics | metrics-graphite | 4.2.19 |
io.dropwizard.metrics | 指标-健康检查 | 4.2.19 |
io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
io.dropwizard.metrics | metrics-jmx | 4.2.19 |
io.dropwizard.metrics | metrics-json | 4.2.19 |
io.dropwizard.metrics | metrics-jvm | 4.2.19 |
io.dropwizard.metrics | 指标-Servlets | 4.2.19 |
io.netty | netty-all | 4.1.96.Final |
io.netty | netty-buffer | 4.1.96.Final |
io.netty | netty-codec | 4.1.96.Final |
io.netty | netty-codec-http | 4.1.96.Final |
io.netty | netty-codec-http2 | 4.1.96.Final |
io.netty | netty-codec-socks | 4.1.96.Final |
io.netty | netty-common | 4.1.96.Final |
io.netty | netty-handler | 4.1.96.Final |
io.netty | netty-handler-proxy | 4.1.96.Final |
io.netty | netty-resolver (Netty 解析器) | 4.1.96.Final |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-windows-x86_64 |
io.netty | Netty TcNative 类 | 2.0.61.Final |
io.netty | netty-transport | 4.1.96.Final |
io.netty | netty-transport-classes-epoll | 4.1.96.Final |
io.netty | netty-transport-classes-kqueue | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-aarch_64 |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-x86_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-aarch_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-x86_64 |
io.netty | netty-transport-native-unix-common | 4.1.96.Final |
io.prometheus | simpleclient | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | 收藏者 | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | 激活 | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | 交易接口 (transaction-api) | 1.1 |
javax.xml.bind | jaxb-api | 2.2.11 |
javolution | javolution | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.12.1 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | 泡菜 | 1.3 |
net.sf.jpam | 杰潘 | 1.1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.snowflake | snowflake-jdbc | 3.13.33 |
net.sourceforge.f2j | arpack_combined_all | 0.1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | antlr-runtime | 3.5.2 |
org.antlr | antlr4-runtime | 4.9.3 |
org.antlr | stringtemplate (字符串模板) | 3.2.1 |
org.apache.ant | 蚂蚁 | 1.9.16 |
org.apache.ant | ant-jsch | 1.9.16 |
org.apache.ant | ant-launcher | 1.9.16 |
org.apache.arrow | 箭头格式 | 12.0.1 |
org.apache.arrow | 箭头-内存-核心 | 12.0.1 |
org.apache.arrow | arrow-memory-netty | 12.0.1 |
org.apache.arrow | 箭头向量 | 12.0.1 |
org.apache.avro | avro | 1.11.2 |
org.apache.avro | avro-ipc | 1.11.2 |
org.apache.avro | avro-mapred | 1.11.2 |
org.apache.commons | commons-collections4(通用集合库) | 4.4 |
org.apache.commons | commons-compress | 1.23.0 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | 策展人-客户端 | 2.13.0 |
org.apache.curator | curator-framework | 2.13.0 |
org.apache.curator | 策展人食谱 | 2.13.0 |
org.apache.datasketches | datasketches-java | 3.1.0 |
org.apache.datasketches | 数据素描-内存 | 2.0.0 |
org.apache.derby | 德比 | 10.14.2.0 |
org.apache.hadoop | Hadoop 客户端运行时 | 3.3.6 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | hive-llap-client | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | 蜂巢存储接口API | 2.8.1 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.14 |
org.apache.httpcomponents | httpcore | 4.4.16 |
org.apache.ivy | 常春藤 | 2.5.1 |
org.apache.logging.log4j | log4j-1.2-api | 2.20.0 |
org.apache.logging.log4j | log4j-api | 2.20.0 |
org.apache.logging.log4j | log4j-core | 2.20.0 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.20.0 |
org.apache.mesos | mesos | 1.11.0-shaded-protobuf |
org.apache.orc | orc-core | 1.9.1-shaded-protobuf |
org.apache.orc | orc-mapreduce | 1.9.1-shaded-protobuf |
org.apache.orc | orc-shims | 1.9.1 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
org.apache.xbean | xbean-asm9-shaded | 4.23 |
org.apache.yetus | 受众注释 | 0.13.0 |
org.apache.zookeeper | 动物园管理员 | 3.6.3 |
org.apache.zookeeper | zookeeper-jute | 3.6.3 |
org.checkerframework | checker-qual | 3.31.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
org.codehaus.janino | commons-compiler(通用编译器) | 3.0.16 |
org.codehaus.janino | 雅尼诺 | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | jetty-client | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-continuation | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-io | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-plus | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-proxy | 9.4.52.v20230823 |
org.eclipse.jetty | 码头安全 | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-server(Jetty服务器) | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlet | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
org.eclipse.jetty | Jetty工具库 | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
org.eclipse.jetty | Jetty 网页应用 | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | WebSocket API | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | WebSocket客户端 | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-common | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | WebSocket服务器 | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | hk2-定位器 | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator (OSGi 资源定位器) | 1.0.3 |
org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | jersey-container-servlet | 2.40 |
org.glassfish.jersey.containers | jersey-container-servlet-core | 2.40 |
org.glassfish.jersey.core | jersey-client | 2.40 |
org.glassfish.jersey.core | jersey-common | 2.40 |
org.glassfish.jersey.core | jersey-server | 2.40 |
org.glassfish.jersey.inject | jersey-hk2 | 2.40 |
org.hibernate.validator | hibernate-validator | 6.1.7.Final |
org.ini4j | ini4j | 0.5.4 |
org.javassist | javassist | 3.29.2-GA |
org.jboss.logging | jboss-logging | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | 注释 | 17.0.0 |
org.joda | joda-convert | 1.7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mariadb.jdbc | mariadb-java-client | 2.7.9 |
org.mlflow | mlflow-spark | 2.2.0 |
org.objenesis | objenesis | 2.5.1 |
org.postgresql | postgresql | 42.6.0 |
org.roaringbitmap | RoaringBitmap | 0.9.45 |
org.roaringbitmap | 垫片 | 0.9.45 |
.rocksdb | rocksdbjni | 8.3.2 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.15 |
org.scala-lang | scala-library_2.12 | 2.12.15 |
org.scala-lang | scala-reflect_2.12 | 2.12.15 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.9.0 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | 测试界面 | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.2.15 |
org.scalanlp | breeze-macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatest | 与Scalatest兼容 | 3.2.15 |
org.scalatest | scalatest-core_2.12 | 3.2.15 |
org.scalatest | scalatest-diagrams_2.12 | 3.2.15 |
org.scalatest | scalatest-featurespec_2.12 | 3.2.15 |
org.scalatest | scalatest-flatspec_2.12 | 3.2.15 |
org.scalatest | scalatest-freespec_2.12 | 3.2.15 |
org.scalatest | scalatest-funspec_2.12 | 3.2.15 |
org.scalatest | scalatest-funsuite_2.12 | 3.2.15 |
org.scalatest | scalatest-matchers-core_2.12 | 3.2.15 |
org.scalatest | scalatest-mustmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-propspec_2.12 | 3.2.15 |
org.scalatest | scalatest-refspec_2.12 | 3.2.15 |
org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-wordspec_2.12 | 3.2.15 |
org.scalatest | scalatest_2.12 | 3.2.15 |
org.slf4j | jcl-over-slf4j | 2.0.7 |
org.slf4j | jul-to-slf4j | 2.0.7 |
org.slf4j | slf4j-api | 2.0.7 |
org.threeten | threeten-extra | 1.7.1 |
org.tukaani | xz | 1.9 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | spire-macros_2.12 | 0.17.0 |
org.typelevel | spire-platform_2.12 | 0.17.0 |
org.typelevel | spire-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | WildFly-OpenSSL | 1.1.3.Final |
org.xerial | sqlite-jdbc | 3.42.0.0 |
org.xerial.snappy | snappy-java | 1.1.10.3 |
org.yaml | snakeyaml | 2.0 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
software.amazon.ion | ion-java | 1.0.2 |
斯塔克斯 | stax-api | 1.0.1 |