Hadoop — 搭建大数据平台笔记 — 总结

过程总结: (点击查看文章)
1. Hadoop — 搭建大数据平台笔记 — 虚拟机的安装与配置

2. Hadoop — 搭建大数据平台笔记 — 安装配置JDK,SSH

3.Hadoop — 搭建大数据平台笔记 — 安装配置Hadoop,运行第一个实例

由于条件有限, 我使用的部分软件可能与读者不相同,比如大部分人可能使用的VMware虚拟机,我这里使用的是VirtualBox虚拟机软件,大体思路差不多,后续可能补充如何使用VMware虚拟机安装


文章中出现的问题总结

1.为什么有的时候用sudo命令,有的时候不用

Linux的权限较高,我们在此过程中会在系统目录下创建,修改文件,修改文件属性等操作,这些操作需要的权限较高,需要sudo命令,并且输入密码才可以进行,再如cd (进入文件夹)这样的命令,只是进入文件夹,无须更高的权限。

如果在运行某行命令时出现如提示     “Permission denied”,  那么在最前面加一个sudo就可以了

2.巧妙运用Tab键,方向键上 ()输入命令

在输入命令的时候如果文件名过长,可以用Tab键自动补全,再比如上述问题,我已经输入过一次命令了,不想再输一遍,那么按一下↑键就可以查看上条命令

 


刚开始是按照老师提供的一些资料来操作的,不过后来发现了一些问题,有的是描述不太准确,有的则是版本更新问题等导致的与教程不一致,总之随机应变吧,遇到问题解决问题。注意就是不要死看教程,里面的有些配置需要自己修改成对应的。


我的安装环境介绍:

三台虚拟机的用户名都为json,密码一致,虚拟机名称便于区分

192.168.56.101 : master   (虚拟机名称为Hadoop01)
192.168.56.102 : slave1    (虚拟机名称为Hadoop02)
192.168.56.103 : slave2    (虚拟机名称为Hadoop03)