无法在databricks上运行spark.eventlog.enabled true和spark.eventlog.dir

pkln4tw6  于 2021-05-29  发布在  Spark
关注(0)|答案(1)|浏览(445)

当我试图运行databricks笔记本上的任意一行代码时,我得到以下错误:
syntaxerror:关键字true处的语法无效 spark.eventLog.enabled true 和syntaxerror:关键字dbfs处的语法无效,命令如下 spark.eventLog.dir dbfs:/databricks/unravel/eventLogs/

xzv2uavs

xzv2uavs1#

不能使用databricks笔记本配置spark.eventlog。我建议你遵循以下步骤。
配置spark事件日志的步骤:
步骤1:转到群集=>选择群集
第二步:点击编辑按钮
步骤3:在“高级选项”下,单击“spark”,然后单击“spark配置”,然后输入以下内容:

spark.eventLog.enabled true
spark.eventLog.dir dbfs:/databricks/unravel/eventLogs/

步骤4:确认并重新启动


reference:deploying unravel 对于来自azure marketplace的azure databricks

相关问题