Hadoop单机模式安装方法深入剖析

本节和大家一起学习一下Hadoop单机模式安装方法，Hadoop单机模式安装主要有九个步骤，相信通过本节的介绍大家对Hadoop的安装方法有进一步的了解，让我们一起来学习Hadoop单机模式吧。

创新互联建站专注于企业成都全网营销、网站重做改版、仓山网站定制设计、自适应品牌网站建设、H5页面制作、商城开发、集团公司官网建设、成都外贸网站建设、高端网站制作、响应式网页设计等建站业务，价格优惠性价比高，为仓山等各大城市提供网站开发制作服务。

Hadoop单机模式安装

实验平台：Ubuntu9.04，Hadoop0.20，JDK1.6

step1.ssh的安装设置

由于Hadoop用ssh通信，因此先进行免密码登录设定，
$apt-getinstallssh
$ssh-keygen-trsa-P''-f~/.ssh/id_rsa
$cat~/.ssh/id_rsa.pub>>~/.ssh/authorized_keys
$sshlocalhost
完成后请登入确认不用输入密码，（第一次登入需按enter键，第二次就可以直接登入到系统。
~$sshlocalhost
~$exit
~$sshlocalhost
~$exit

step2.安装java

由于SunJavaRuntime是执行Hadoop必备的工具，因此我们需要安装JRE或JDK。这里我们直接安装JDK，因为后面写程序仍旧需要用到JDK所提供的编译程序。目前Ubuntu9.04提供的JDK套件最新版本为SunJava(TM)DevelopmentKit(JDK)6，套件名称为sun-java6-jdk。并建议删除原本的「gcj」。
~$sudoapt-getpurgejava-gcj-compat
~$sudoapt-getinstallsun-java6-binsun-java6-jdksun-java6-jre

step3.下载安装Hadoop

?Hadoop单机模式时请至下载Hadoop0.20，并解开压缩文件到/opt路径。
?$tarzxvfhadoop-0.20.0.tar.gz
?$sudomvhadoop-0.20.0/opt/
?$sudochown-Rhadoop:hadoop/opt/hadoop-0.20.0
?$sudoln-sf/opt/hadoop-0.20.0/opt/hadoop

step4.设定hadoop-env.sh

?进入hadoop目录，做进一步的设定。我们需要修改两个档案，第一个是hadoop-env.sh，需要设定JAVA_HOME,HADOOP_HOME,PATH三个环境变量。
/opt$cdhadoop/
/opt/hadoop$cat>>conf/hadoop-env.sh< 贴上以下信息
exportJAVA_HOME=/usr/lib/jvm/java-6-sun
exportHADOOP_HOME=/opt/hadoop
exportPATH=$PATH:/opt/hadoop/bin
EOF

step5.设定hadoop配置文件

 
 
 
  
  
  ?編輯/opt/hadoop/conf/core-site.xml  
  
  
   
  
  
   
  
  
  fs.default.name 
  
  
  hdfs://localhost:9000 
  
  
   
  
  
   
  
  
  hadoop.tmp.dir 
  
  
  /tmp/hadoop/hadoop-${user.name} 
  
  
   
  
  
   
  
  
  ?編輯/opt/hadoop/conf/hdfs-site.xml  
  
  
   
  
  
   
  
  
  dfs.replication 
  
  
  1 
  
  
   
  
  
   
  
  
  ?編輯/opt/hadoop/conf/mapred-site.xml  
  
  
   
  
  
   
  
  
  mapred.job.tracker 
  
  
  localhost:9001

step6.格式化HDFS

?Hadoop单机模式安装过程中需要格式化HDFS。以上我们已经设定好Hadoop单机测试的环境，接着让我们来启动Hadoop相关服务，格式化namenode，secondarynamenode,tasktracker
?$cd/opt/hadoop
?$source/opt/hadoop/conf/hadoop-env.sh
?$hadoopnamenode-format

step7.启动Hadoop

?接着用start-all.sh来启动所有服务，包含namenode,datanode,
/opt/hadoop$bin/start-all.sh
执行画面如：
startingnamenode,loggingto/opt/hadoop/logs/hadoop-hadooper-namenode-vPro.out
localhost:startingdatanode,loggingto/opt/hadoop/logs/hadoop-hadooper-datanode-vPro.out
localhost:startingsecondarynamenode,loggingto/opt/hadoop/logs/hadoop-hadooper-secondarynamenode-vPro.out
startingjobtracker,loggingto/opt/hadoop/logs/hadoop-hadooper-jobtracker-vPro.out

step8.安装完毕测试

?启动之后，可以检查以下网址，来观看服务是否正常。Hadoop管理接口HadoopTaskTracker状态HadoopDFS状态
?http://localhost:50030/-Hadoop管理接口
注：已安装测试成功，参考修改于http://trac.nchc.org.tw/cloud/wiki/Hadoop_Lab1，感谢NCHC。本节关于Hadoop单机模式安装介绍到这里。

网页名称：Hadoop单机模式安装方法深入剖析
分享URL：http://www.shufengxianlan.com/qtweb/news20/120720.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源：创新互联

猜你还喜欢下面的内容