hadoop搭建步骤最关键两步 hadoop的搭建步骤



文章插图
hadoop搭建步骤最关键两步 hadoop的搭建步骤

文章插图
1.虚拟机环境准备
1) 克隆虚拟机
2) 修改克隆虚拟机的静态ip
3) 修改主机名
4) 关闭防火墙
5) 创建atguigu用户
6) 配置atguigu用户具有root权限
以上6条内容详见《尚硅谷大数据技术之Linux》文档 。
7)在/opt目录下创建文件夹
(1)在/opt目录下创建module、software文件夹
[[email protected] opt]$ sudo mkdir module
[[email protected] opt]$ sudo mkdir software
(2)修改module、software文件夹的所有者
[[email protected] opt]$ sudo chown atguigu:atguigu module/ software/
[[email protected] opt]$ ll
总用量 8
drwxr-xr-x. 2 atguigu atguigu 4096 1月 17 14:37 module
drwxr-xr-x. 2 atguigu atguigu 4096 1月 17 14:38 software
2.安装jdk
1)卸载现有jdk
(1)查询是否安装java软件:
[[email protected] opt]$ rpm -qa | grep java
(2)如果安装的版本低于1.7,卸载该jdk:
[[email protected] opt]$ sudo rpm -e 软件包
2)用SecureCRT工具将jdk导入到opt目录下面的software文件夹下面
“alt+p”进入sftp模式
选择jdk1.8拖入
3)在linux系统下的opt目录中查看软件包是否导入成功 。
[[email protected] opt]$ cd software/
[[email protected] software]$ ls
hadoop-2.7.2.tar.gz jdk-8u144-linux-x64.tar.gz
4)解压jdk到/opt/module目录下
[[email protected] software]$ tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/
5)配置jdk环境变量
(1)先获取jdk路径:
[[email protected] jdk1.8.0_144]$ pwd
/opt/module/jdk1.8.0_144
(2)打开/etc/profile文件:
[[email protected] software]$ sudo vi /etc/profile
在profile文件末尾添加jdk路径:
#JAVA_HOME
export JAVA_HOME=/opt/module/jdk1.8.0_144
export PATH=$PATH:$JAVA_HOME/bin
(3)保存后退出:
:wq
(4)让修改后的文件生效:
[[email protected] jdk1.8.0_144]$ source /etc/profile
6)测试jdk是否安装成功:
[[email protected] jdk1.8.0_144]# java -version
java version “1.8.0_144”
注意:重启(如果java -version可以用就不用重启)
[[email protected] jdk1.8.0_144]$ sync
[[email protected] jdk1.8.0_144]$ sudo reboot
3.安装Hadoop
【hadoop搭建步骤最关键两步 hadoop的搭建步骤】0)Hadoop下载地址:
https://archive.apache.org/dist/hadoop/common/hadoop-2.7.2/