微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

如何找到火花安装细节?

如何解决如何找到火花安装细节?

我是一个刚起步的新手。在我们的ubuntu服务器中,我看到已经下载了APACHE-SPARK。我的问题如下

1)我是否在使用下面的正确命令查找是否安装了火花?

spark-submit --version        #spark-submit: command not found
spark-shell --version         #spark-shell: command not found
spark-sql --version           #spark-sql: command not found
whereis spark-shell           #produces directory path of spark folder
sc.getConf.get("spark.home")  #-bash: Syntax error near unexpected token `"spark.home"' 

2)如果已安装并部署,如何找到部署模式?

我发现有standaloneyarnmesos之类的东西。这里我已经提到了post,但它显示了WebUI。我怎么知道如何在服务器中找到spark的部署模式?

3)像其他任何普通安装应用程序一样发火花

我相信在安装spark时,只能按照standaloneyarnmesos等任何一种模式进行部署。知道spark只能以集群模式部署,而这些是集群类型的不同类型?

3)如何访问Spark UI?

 I tried the below command,but it doesn't produce any output.

jps -lm | grep spark
/tmp/spark-*.pid

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。