如何快速搭建Hadoop運行環(huán)境

　　Hadoop 是一個分布式系統(tǒng)基礎(chǔ)架構(gòu)，在大數(shù)據(jù)領(lǐng)域被廣泛的使用，它將大數(shù)據(jù)處理引擎盡可能的靠近存儲，Hadoop 最核心的設(shè)計就是 HDFS 和 MapReduce，HDFS 為海量的數(shù)據(jù)提供了存儲，MapReduce 為海量的數(shù)據(jù)提供了計算。這篇文章主要就是介紹一下如何搭建一個 Hadoop 運行環(huán)境。

　　我們使用 Linux 操作系統(tǒng)來搭建環(huán)境，下面的信息是用來準備搭建 Hadoop 環(huán)境的電腦環(huán)境信息。

　　1. hadoop@ubuntu：~$ cat /etc/os-release

　　2. NAME=“Ubuntu”

　　3. VERSION=“14.04.5 LTS， Trusty Tahr”

　　4. ID=ubuntu

　　5. ID_LIKE=debian

　　6. PRETTY_NAME=“Ubuntu 14.04.5 LTS”

　　7. VERSION_ID=“14.04”

　　8. HOME_URL=“http://www.ubuntu.com/”

　　9. SUPPORT_URL=“http://help.ubuntu.com/”

　　10. BUG_REPORT_URL=“http://bugs.launchpad.net/ubuntu/”

　　緊接著來新建一個用戶，這一步其實也可以省略的，可以根據(jù)實際情況來決定，這里是新建了一個叫 hadoop 的新用戶。

　　1. #創(chuàng)建新用戶

　　2. sudo useradd -m hadoop -s /bin/bash

　　3. #設(shè)置密碼

　　4. sudo passwd hadoop

　　5. #為hadoop用戶增加管理員權(quán)限

　　6. sudo adduser hadoop sudo

　　7. #切換到hadoop用戶

　　8. su hadoop

　　我們首先來設(shè)置一下 SSH 無密碼登錄，這一步建議都設(shè)置一下，因為分布式系統(tǒng)環(huán)境都是由多臺浪潮服務(wù)器構(gòu)成的，設(shè)置免密碼登錄會方便使用。

　　1. #先檢查下是否可以在沒有密碼的情況下ssh到localhost

　　2. ssh localhost

　　3. #如果在沒有密碼的情況下無法ssh到localhost，請執(zhí)行以下命令

　　4. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa

　　5. cat ~/.ssh/id_rsa.pub 》》 ~/.ssh/authorized_keys

　　6. chmod 0600 ~/.ssh/authorized_keys