1. 程式人生 > 實用技巧 >Hadoop叢集搭建(1)

Hadoop叢集搭建(1)

相關資源文章最後自取。

首先下載安裝VMware station pro16

然後下載centos7映象檔案

下載Xshell

如果過程中有命令找不到,試一下yum install 【命令】進行安裝,然後再使用

Hadoop搭建:

1.關閉防火牆。

service iptables stop(這是關閉靜態防火牆,我的系統是firewalld,動態。輸入下面的命令)

或者systemctl stop firewalld

禁止開機自啟

chkconfig iptables off

systemctl disable firewalld.service

2.關閉selinux

vim /etc/selinux/config(進入vim,修改為截圖所示)

按esc

:wq儲存退出

3.設定免密登入

ssh-keygen -t rsa

(四次回車)

ssh-copy-id bigdata1(bigdata1/2/3是我新建虛擬機器的名字,需要將ip和名字寫入/etc/hosts)如下圖

在bigdata1裡

scp /root/.ssh/authorized_keys bigdata2:/root/.ssh

scp /root/.ssh/authorized_keys bigdata3:/root/.ssh

4時鐘同步

## 安裝
yum install -y ntp

## 啟動定時任務
crontab -e

在vi裡寫*/1 * * * * /usr/sbin/ntpdate ntp4.aliyun.com;

5.安裝jdk

先檢視自己系統裡有沒有openjdk,

檢視自帶的openjdk

rpm -qa | grep java

如果有就解除安裝

解除安裝系統自帶的openjdk

rpm -e java-1.6.0-openjdk-1.6.0.41-1.13.13.1.el6_8.x86_64 tzdata-java-2016j-1.el6.noarch java-1.7.0-openjdk-1.7.0.131-2.6.9.0.el6_8.x86_64 --nodeps

上傳jdk並解壓然後配置環境變數使用Xftp快速傳輸檔案(Xshell和Xftp是一塊下的)

所有軟體的安裝路徑

mkdir -p /export/servers

所有軟體壓縮包的存放路徑

mkdir -p /export/softwares

上傳jdk到/export/softwares路徑下去,並解壓

tar -zxvf jdk-8u141-linux-x64.tar.gz -C ../servers/

配置環境變數

vim /etc/profile

export JAVA_HOME=/export/servers/jdk1.8.0_141
export PATH=:$JAVA_HOME/bin:$PATH
注意一下自己下載的jdk版本是否對應

修改完成之後記得source /etc/profile生效

。。