Pypark齐柏林飞艇-无法打开pythoninterpreter

hi3rlvi2  于 2021-07-09  发布在  Java
关注(0)|答案(0)|浏览(131)

我对齐柏林飞艇和Pypark还不熟悉。
我试图让齐柏林飞艇和Pypark一起运行,但徒劳无功。
我的设置:
4 x覆盆子4(8gb)
ubuntu服务器64位20.04
hadoop:3.2.2版
Yarn
spark 3.1.1和hadoop集成
齐柏林飞艇0.9
pi01作为主pi02-04作为工人。Spark安装在所有pi上。
hadoop和yarn运行没有任何问题。pyspark shell运行,我可以执行命令。

但齐柏林飞艇的同样命令失败了。。

java.io.ioexception:无法运行程序“python”:错误=2,没有这样的文件或目录
但是,使用齐柏林飞艇时%pyspark和%python无法工作。我现在已经搜索了好几个小时,但没有找到解决方案(从debian切换到ubuntu,然后再切换回来)。

我也试着用jupyter笔记本从win10电脑上访问spark master,但我不知道怎么做,最后还是放弃了。
有什么想法吗?
我感谢你的帮助。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题