我目前在azuredatabricks中有一个数据工程管道,它提供来自一个环境的数据,我希望运行相同的步骤并创建具有相同名称的单独对象,这些对象将包含来自不同环境的完全相同的数据格式。
我所拥有的是:
不同的笔记本
几个模式中的不同配置单元表
转换数据存储在Parquet地板和三角洲
不在azure中创建新的databricks工作区就可以实现吗?基本上,我希望在不同的集群上重新运行相同的脚本,并使它们和持久化的数据一起可用。
我目前在azuredatabricks中有一个数据工程管道,它提供来自一个环境的数据,我希望运行相同的步骤并创建具有相同名称的单独对象,这些对象将包含来自不同环境的完全相同的数据格式。
我所拥有的是:
不同的笔记本
几个模式中的不同配置单元表
转换数据存储在Parquet地板和三角洲
不在azure中创建新的databricks工作区就可以实现吗?基本上,我希望在不同的集群上重新运行相同的脚本,并使它们和持久化的数据一起可用。
暂无答案!
目前还没有任何答案,快来回答吧!