我想知道,如果dataproc提供的可能性,使用星火在集群模式下从一个jupyter笔记本?如果是,它是如何工作的?有livyapi+sparkmagic或者其他解决方案吗?谢谢!
neskvpey1#
dataproc不提供这种现成的功能,但是您可以使用livy初始化操作来设置它。也就是说,推荐的将jupyter与dataproc结合使用的方法是通过dataproc hub生成单用户dataproc集群来承载jupyter和jupyterlab笔记本环境。
1条答案
按热度按时间neskvpey1#
dataproc不提供这种现成的功能,但是您可以使用livy初始化操作来设置它。
也就是说,推荐的将jupyter与dataproc结合使用的方法是通过dataproc hub生成单用户dataproc集群来承载jupyter和jupyterlab笔记本环境。