Hadoop怎样安装
1、Hadoop安装
1)集群规划

2、项目经验之HDFS存储多目录
1)确认HDFS的存储目录,保证存储在空间最大硬盘上

3、在hdfs-site.xml文件中配置多目录,最好提前配置好,否则更改目录需要重新启动集群

4、项目经验之支持LZO压缩配置
1)先下载lzo的jar项目
5、下载后的文件名是hadoop-lzo-master,它是一个zip格式的压缩包,先进行解压,然后用maven编译。生成hadoop-lzo-0.4.20.jar。
6、将编译好后的hadoop-lzo-0.4.20.jar 放入hadoop-2.7.2/share/hadoop/common/

7、同步hadoop-lzo-0.4.20.jar到hadoop103、hadoop104

8、core-site.xml增加配置支持LZO压缩

9、同步core-site.xml到hadoop103、hadoop104

10、启动及查看集群

11、(1)web和进程查看
Web查看
进程查看:jps查看各个节点状态。
12、(2)当启动发生错误的时候:
查看日志:/home/atguigu/module/hadoop-2.7.2/logs
如果进入安全模式,可以通过hdfs dfsadmin -safemode leave
停止所有进程,删除data和log文件夹,然后hdfs namenode -format 来格式化
声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
阅读量:187
阅读量:38
阅读量:89
阅读量:188
阅读量:32