尝试为nohub spark submit创建别名或函数

lskq00tm  于 2021-05-17  发布在  Spark
关注(0)|答案(1)|浏览(402)

尝试为nohub spark submit创建别名或函数&我收到一个错误:

[hadoop@ip-172-31-82-184 ~]$ function nhsubmit { nohup spark-submit --packages io.delta:delta-core_2.12:0.7.0 --driver-memory 20g --executor-memory 20g "$@" output.log 2>&1 & }
[hadoop@ip-172-31-82-184 ~]$ export -f nhsubmit
[hadoop@ip-172-31-82-184 ~]$ nhsubmit spark_hlper.py
-bash: spark_hlper.py: command not found

我真的不喜欢bash。谢谢,

wydwbb8l

wydwbb8l1#

$ cat tst.sh

# !/bin/bash

/usr/bin/nohup spark-submit --packages io.delta:delta-core_2.12:0.7.0 --driver-memory 20g --executor-memory 20g $1 > output.log 2>&1 &

并用 $ ./tst.sh tst.py 作品

相关问题