tencent cloud

文档反馈

引擎内核版本

最后更新时间:2024-07-31 17:47:43
DLC 根据不同应用场景提供了不同的内核版本,并针对内核做了大量的特性和性能优化,内核版本一览如下所示。
如果您的场景主要为交互式查询,推荐使用 Presto 引擎和 SparkSQL 引擎和最新的内核版本。
如果您的场景主要使用批作业,推荐使用 Spark 作业引擎和 Spark3.2内核版本。
引擎类型
内核版本
说明
Presto
SuperSQL-P 1.0
基于原生 Presto 0.242 版本实现,在此基础上支持动态加载数据源、Dymanic Filter 增强、 Iceberg V2 表、非分区表的 INSERT OVERWRITE、支持执行 Hive UDF。
SparkSQL
SuperSQL-S 1.0
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、自适应 Shuffle Manager。
Spark 作业
Spark 3.2
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、Python3、支持自适应 Shuffle Manager。
Spark 2.4
基于原生 Spark2.4版本实现,在此基础上支持 Iceberg 0.13.1、Python2、Python3。

联系我们

联系我们,为您的业务提供专属服务。

技术支持

如果你想寻求进一步的帮助,通过工单与我们进行联络。我们提供7x24的工单服务。

7x24 电话支持