在服务器上搭建spark集群环境
1、运行SecureCRT,连接上要集群的服务器,首先修改selinxu;
命令: vi /etc/selinux/config,将里面的
SELINUX=enforcing
修改为SELINUX=disabled

2、修改完selinux,然后关闭防火墙;
命令:chkconfig iptables off

3、必须修改主机名HOSTNAME;
命令:vi /etc/sysconfig/network
修改HOSTNAME=spark+IP(例如:spark45)

4、运行命令:service httpd status,检查是否有安装httpd,若没有则可以从yum上安装;具体操作如下:首先先创建yum;命令: vi /etc/yum.repos.d/yum.repo
[isoyum]
name=isoyum
baseurl=ftp://10.235.136.2/pub
enabled=1
gpgcheck=0
将上面的代码复制上去,保存(注意baseurl修改为自己的yum)


5、安装http、并设置启动;
安装命令:yum install httpd
开机启动命令:chkconfig httpd on


6、设置ssh免登陆;
命令: scp root@10.235.136.5:/root/.ssh/authorized_keys /root/.ssh/
测试10.235.136.5 ssh到各个节点免登陆(注把ip改成自己的服务器)
至此,集群环境就搭建好了!

声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
阅读量:179
阅读量:31
阅读量:160
阅读量:146
阅读量:160