wiki:shunfa/2010/0503

Version 1 (modified by shunfa, 14 years ago) (diff)

--

Hadoop 簡化叢集安裝設定

原始安裝設定步驟

執行環境

所有主機環境需已安裝下列套件

  • openssh-server
  • sun-java6-bin
  • sun-java6-jdk
  • sun-java6-jre
    ~$ sudo apt-get install openssh-server
    ~$ sudo apt-get purge java-gcj-compat
    ~$ sudo apt-get install sun-java6-bin  sun-java6-jdk sun-java6-jre
    

設定表(以兩台主機為例)

Steps主機一主機二
角色Data: namenode + datanode
Job: jobtracker + tasktracker
Data: datanode
Job: tasktracker
Step1登入免key密碼登入免key密碼
Step2install Javainstall Java
Step3 下載安裝Hadoop
Step4 設定 hadoop-env.sh
Step5 設定 hadoop-site.xml
Step6 設定masters及slaves
Step7 複製Hadoop_Home內的資料至主機二(or其他slave)
Step8 格式化HDFS
Step9 啟動Hadoop

簡化

References