远程过程中出现的一些错误

1

Cannot delete /tmp/hadoop-yarn/staging/hadoop/.staging/job_1477796535608_0001. Name node is in safe mode.

上述问题解决：Linux集群中的namenode没有关闭safemode

1.复制虚拟机文件
2.在VMware中分别打开三个虚拟机
3.设置NAT模式，固定IP，可上网
4.运行一下

在windows下使用IDEA远程连接linux集群进行mapreduce调试

改用户名，administrator改为hadoop，即改为linux集群的用户名，我的为hadoop

将hadoop.tar.gz解压至windows下，添加系统变量跟环境变量 HADOOP_HOME，添加PATH追加上HADOOP_HOME\bin;HADOOP_HOME\sbin;

主节点操作

改名字，改为master，hosts
改hadoop的slaves加四个xml
slaves是加一个节点就要改一次

Hadoop Copy

-copyFromLocal 相当于复制
-moveFromLocal 本地会删除，相当于剪切
-getmerge 合并， 源目录 -> 目的目录
-mkdir
-rmr
-ls
-copyToLocal 从hadoop下文件，不过通常用 -get（类似于-put）
hadoop fs -lsr

centos ssh连不上

出现22端口拒绝访问等问题

确保安装相关软件
可以用yum search 来查找相关ssh的软件包

主机连不上VMware，ping不通，

分析：与linux能不能上网没有关系，是VMware软件设置出错

可能原因
1.服务。
打开服务，查看VM的各项服务是否为启动状态【首先要确定】
2.同一网段。
拿NAT来说，

centos 安装jdk

目的是使用hadoop
不要使用openjdk，要使用更完整的jdk，Oracle官网

首先卸载当前已有的jdk【root下进行】

1
2

java-version显示当前jdk
rpm -qa | grep java将本机全部的jdk查找出来