☰
Databricks Serverless 计算不支持 RDD API 与部分 Spark 配置
2026/10/20 2:59:00 网站建设 项目流程

Databricks 免费版(Community Edition)现在只能创建 serverless 计算,标准集群入口已经下线。用惯了全功能集群的人切过去之后,最先撞上的就是两类报错:读写某些 Spark 配置被拒绝、调用 RDD 被拒绝。

问题现象

读一个自适应执行相关的配置:

spark.conf.get("spark.sql.adaptiveExecution.enabled")

报错:

[CONFIG_NOT_AVAILABLE] Configuration spark.sql.adaptiveExecution.enabled is not available. SQLSTATE: 42K0I

再看分区数:

df.rdd.getNumPartitions

需要专业的网站建设服务?

联系我们获取免费的网站建设咨询和方案报价,让我们帮助您实现业务目标

立即咨询