您好,欢迎来到花图问答。
搜索
您的当前位置:首页spark 配置文件安装单机版和集群

spark 配置文件安装单机版和集群

来源:花图问答

/usr/local/Cellar/apache-spark/2.4.1/bin


单机版安装

修改spark的配置文件

  • slave


  • 修改 spark-env.sh


  • master端口号


  • 修改 slaves


Environment variables可以通过每个节点的conf/spark-env.sh脚本设置每台机器的设置。例如IP地址
注意,当Spark安装时,conf/spark-env.sh默认是不存在的。你可以复制conf/spark-env.sh.template创建它。
可以在spark-env.sh中设置如下变量:


Copyright © 2019- huatuowenda.com 版权所有 湘ICP备2023022495号-1

违法及侵权请联系:TEL:199 1889 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务