在服务器上搭建spark集群环境

 时间:2026-02-14 01:37:24

1、运行SecureCRT,连接上要集群的服务器,首先修改selinxu;

命令: vi /etc/selinux/config,将里面的

SELINUX=enforcing

修改为SELINUX=disabled

在服务器上搭建spark集群环境

2、修改完selinux,然后关闭防火墙;

命令:chkconfig iptables off

在服务器上搭建spark集群环境

3、必须修改主机名HOSTNAME;

命令:vi /etc/sysconfig/network

修改HOSTNAME=spark+IP(例如:spark45)

在服务器上搭建spark集群环境

4、运行命令:service httpd status,检查是否有安装httpd,若没有则可以从yum上安装;具体操作如下:首先先创建yum;命令: vi /etc/yum.repos.d/yum.repo

[isoyum]

name=isoyum

baseurl=ftp://10.235.136.2/pub

enabled=1

gpgcheck=0

将上面的代码复制上去,保存(注意baseurl修改为自己的yum)

在服务器上搭建spark集群环境

在服务器上搭建spark集群环境

5、安装http、并设置启动;

安装命令:yum install httpd

开机启动命令:chkconfig httpd on

在服务器上搭建spark集群环境

在服务器上搭建spark集群环境

6、设置ssh免登陆;

命令: scp root@10.235.136.5:/root/.ssh/authorized_keys /root/.ssh/

测试10.235.136.5 ssh到各个节点免登陆(注把ip改成自己的服务器)

至此,集群环境就搭建好了!

在服务器上搭建spark集群环境

  • qt设置word表格边框
  • 如何利用RP Axure绘制统计数据的柱状图?
  • Firefox如何本地安装selenium IDE
  • python教程【38】:得到字典的不同部分的值
  • jquery如何动态写入td内容
  • 热门搜索
    去北京旅游要多少钱 旅游点 北海道旅游攻略 张家界凤凰旅游攻略 肇庆旅游景点 武汉旅游培训网 青州旅游景点大全 宝中旅游官方网站 北京联合大学旅游学院 十一旅游团