#apache-spark
#apache-искра
Вопрос:
Я установил spark и пытаюсь запустить файл ‘train.py» в каталоге «/home/xxx/Desktop/BD_Project » в оболочке с помощью следующей команды: $SPARK_HOME/bin/spark-submit /home/xxx/Desktop/BD_Project/train.py gt; output.txt
У моих товарищей по команде, которые использовали ту же страницу, что и я, для установки spark, нет проблем при запуске этой программы. Тем не менее, это приводит к следующей ошибке для меня: bash: /bin/spark-submit: No such file or directory
Комментарии:
1. Вы должны установить
SPARK_HOME. Можете ли вы запуститьecho $SPARK_HOMEи проверить , указывает ли он на каталог установки spark ?2. @Sanket9394 когда я запускаю
echo $SPARK_HOME, он ничего не возвращает. Как мне указать его в каталог установки spark?3. перейдите в папку Spark, которую вы бы загрузили и распаковали. Давайте определимся с местом
User/abc/spark_2.11. ПробегSPARK_HOME=User/abc/spark_2.11