日本免费精品_最新日韩一区_亚洲视频一区在线_a在线视频观看_天天射夜夜骑_粉嫩av一区二区三区_欧美中日韩免费视频_综合图区欧美_国内精品美女在线观看_午夜精品久久久久久久男人的天堂

首頁(yè) > 系統(tǒng) > Fedora > 正文

fedora20安裝hadoop-2.5.1

2024-06-28 13:24:08
字體:
來(lái)源:轉(zhuǎn)載
供稿:網(wǎng)友
fedora20安裝hadoop-2.5.1

(博客園-番茄醬原創(chuàng))

首先感謝作者lxdhdgss,他的博文直接幫助了我如何安裝hadoop,下面是他的博文修改版,用于安裝在fedora20上面的,jdk1.8版本。

到hadoop官網(wǎng)去copy一下鏈接地址(hadoop2.5.1的地址http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.5.1/hadoop-2.5.1.tar.gz),在終端wget url(下載鏈接地址),會(huì)直接下載到當(dāng)前目錄下。然后解壓,tar xvf apache-hadoop-2.5.1.tar.gz,解壓下載的tar.gz。會(huì)看到一個(gè)名為hadoop-2.5.1的文件夾,把它拷貝到自己平時(shí)安裝軟件的地方,比如我是/opt/lib64/下面,命令是mv hadoop-2.5.1 /opt/lib64/。

注意:下面修改的時(shí)候,大家不會(huì)用vi,就用gedit來(lái)代替吧,可視化操作,簡(jiǎn)潔明了。如vi xxx可以換成gedit xxx

下面就需要對(duì)Hadoop進(jìn)行設(shè)置了。

首先vi /etc/PRofile,增加

bash代碼

1     #設(shè)置jdk的安裝路徑2     export java_HOME=/opt/lib64/jdk1.8.0_203     #指定CLASSPATH和PATH4     export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib5     export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin6     #設(shè)置的hadoop的環(huán)境變量7     export HADOOP_HOME=/opt/lib64/hadoop-2.5.18     export PATH=$HADOOP_HOME/bin:$PATH9     export CLASSPATH=$HADOOP_HOME/lib:$CLASSPATH

保存退出(按下ESC,然后再按下這三個(gè):wq)

哦,別忘了在終端執(zhí)行命令下source /etc/profile,讓修改過(guò)的profile馬上生效。

然后進(jìn)入hadoop下面的etc/hadoop/(不是系統(tǒng)的etc,是hadoop下面的etc,這是一個(gè)配置文件夾),用ls命令,可以看到有很多配置文件。

先vi hadoop-env.shbash代碼export JAVA_HOME=/opt/lib64/jdk1.8.0_20vi yarn-env.sh bash代碼export JAVA_HOME=/opt/lib64/jdk1.8.0_20

vi core-site.xml

 <configuration>     <property>     <name>fs.default.name</name>    <value>hdfs://localhost:9000</value>   </property>  <property>   <name>hadoop.tmp.dir</name>   <value>/home/hadoop/xxx/tmp </value></property> </configuration> 

保存退出(按下ESC,然后再按下這三個(gè):wq)

vi hdfs-site.xml

Xml代碼

 1 <configuration>   2   <property>   3      <name>dfs.namenode.name.dir</name>   4     <value>file:/home/hadoop/dfs/name</value>   5   </property>   6   <property>   7      <name>dfs.namenode.data.dir</name>   8      <value>file:/home/hadoop/dfs/data</value>   9   </property>  10   <property>  11      <name>dfs.replication</name>  12      <value>1</value>  13   </property>  14 </configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

----------------------------按照hadoop官網(wǎng)上面的配置-----------------------

vi mapred-site.xml

Xml代碼

<configuration>     <property>          <name>mapreduce.jobtracker.address</name>          <value>localhost:9001</value>     </property>     <property>         <name>mapreduce.framework.name</name>         <value>yarn</value>     </property></configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

vi yarn-site.xml:

Xml代碼

1 <configuration>2     <property>3         <name>yarn.nodemanager.aux-services</name>4         <value>mapreduce_shuffle</value>5     </property>6 </configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

-------------------------------------------------------------------------------

-------------------------補(bǔ)充---------------ssh免登陸設(shè)置

還有就是:由于原文沒(méi)有設(shè)置如何面驗(yàn)證登陸ssh,這邊給與補(bǔ)充。

由于fedora已經(jīng)默認(rèn)安裝了openssh,所以不用再此安裝ssh了。直接直接配置以下就可以了

配置 SSH 免密碼登陸 ,下面是bash命令,直接在終端輸入(最好是root身份,如何root?只要終端輸入su,然后root的密碼就可以登陸root賬戶了)

  1. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
  2. cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
  3. chmod 600 ~/.ssh/authorized_keys
  4. sudo service sshd restart

就可以了。到此就大功告成了

-----------------------------------------------------------------------------

好了,現(xiàn)在可以啟動(dòng)看看了

先格式化,這個(gè)很重要。

bash命令
  1. hadoopnamenode-format

這句話基本上就是把目前你的hadoop系統(tǒng)確定一下結(jié)構(gòu),我們的hadoop系統(tǒng)中,一般是一個(gè)namenode+多個(gè)datanode。

namenode相當(dāng)于顧客房間表,datanode相當(dāng)于具體的房間。

然后啟動(dòng)hadoop吧。

到hadoop的根目錄,

bash命令
  1. sbin/start-dfs.sh

然后再啟動(dòng)yarn,因?yàn)?.5.0的版本,早就已經(jīng)是以yarn這種更好的架構(gòu)來(lái)運(yùn)行了。

終端顯示Starting namenodes on [localhost]root@localhost's passWord: localhost: starting namenode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-namenode-localhost.localdomain.outroot@localhost's password: localhost: starting datanode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-datanode-localhost.localdomain.outStarting secondary namenodes [0.0.0.0]root@0.0.0.0's password: 0.0.0.0: starting secondarynamenode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-secondarynamenode-localhost.localdomain.out

終端顯示
  1. sbin/start-yarn.sh

然后查看一下開啟的進(jìn)程

bash命令
  1. jps
終端顯示 [root@localhost hadoop-2.5.1]# jps30305 DataNode26243 org.eclipse.equinox.launcher_1.3.0.v20140415-2008.jar26645 org.eclipse.equinox.launcher_1.3.0.v20120522-1813.jar30583 SecondaryNameNode8216 ResourceManager30092 NameNode30831 Jps8511 NodeManager

說(shuō)明hadoop已經(jīng)啟動(dòng)成功。

打開hdfs管理頁(yè)面,查看hdfs系統(tǒng):

在瀏覽器打開http://localhost:50070,可看到hadoop的管理界面,導(dǎo)航欄的最后一項(xiàng)還可以查看hadoop里面的文件。

我們來(lái)試著傳個(gè)文件,到/home下面,新建一個(gè)文件,vim test.txt,隨便寫些東西。保存。

然后把這個(gè)文件上傳。

打開job管理頁(yè)面,查看job的運(yùn)行情況:

由于這個(gè)是hadoop2.5.1版本,貌似以前的http://localhost:50030換成了現(xiàn)在的http://localhost:8088,所以需要查看jod的運(yùn)行情況,需要在瀏覽器打開localhost:8088

現(xiàn)在的ResourceManager和NodeManager代替了原來(lái)的JobTracker和TaskTracker

bash命令
  1. hadoopfs-puttest.txt/test.first (表示將本地的text放置在dfs根目錄下,并且名為test.first可以隨意命名)

在瀏覽器的后臺(tái)刷新看看有沒(méi)有test.first(打開http://localhost:50070,選擇utilties在點(diǎn)擊browse the file system)。

你也可以先給hadoop建立目錄

bash命令
  1. hadoopfs-mkdir/xxx

上面的上傳文件也可以變成這樣:

bash命令
  1. hadoopfs-puttest.txt/xxx/test.txt

其他的操作,大家自己去試吧。

特別感謝lxdhdgss,他的博文地址是:http://www.CUOxin.com/topic/1135085

(官網(wǎng)有英文版的配置說(shuō)明,大家可以參照http://hadoop.apache.org/docs/r2.5.1/hadoop-project-dist/hadoop-common/SingleCluster.html#Configuration)


發(fā)表評(píng)論 共有條評(píng)論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
极品久久久久久| 中文字幕在线播放一区| 在线看的av| 精品亚洲综合| 欧美国产三级| 欧美日韩国产亚洲一区| 国产91欧美| 日韩av不卡在线观看| 91精品国产亚洲| 国产午夜在线观看| 亚洲欧洲国产视频| 欧美日韩亚洲综合在线| 欧美亚洲免费高清在线观看| 欧美一级久久久久久久久大| 欧美在线日韩| 日韩精品中文字幕第1页| 久久婷婷综合国产| 欧美中文字幕| 在线视频亚洲| 精品国内自产拍在线视频| 天天综合天天综合| 欧美日韩综合色| 欧美在线观看视频一区| 欧美二三四区| 国产午夜精品一区二区三区视频| 亚洲专区一二三| 久久精品免费看| 区日韩二区欧美三区| av免费在线不卡| 1区不卡电影| 欧美日韩在线视频免费观看 | 伊人伊成久久人综合网小说| 国产中文在线视频| 日本va欧美va精品发布| 欧美中文字幕| 国产成人精品免费久久久久| 欧美国产日韩在线播放| 欧美日韩一二三四| 精品一区二区在线观看视频| 日韩国产一区| 粉嫩粉嫩芽的虎白女18在线视频| 日韩在线视频在线观看| 亚洲国产午夜精品| 欧美日韩亚洲91| 欧美一卡2卡三卡4卡5免费| 日韩免费看网站| 婷婷久久综合网| 亚洲第一视频在线观看| 美女免费视频一区| 91精品国产综合久久久久久| 欧美日韩国产页| 久久久综合av| 免费精品国产自产拍在| 日韩视频免费直播| 亚洲热在线观看| 黄色一区二区在线观看| 日韩亚洲不卡在线| 国产区日韩欧美| 亚洲国内精品视频| 日韩 欧美 综合| 日本亚洲视频在线| 欧美成人二区| 91精品在线观看视频| 欧美久久久久久蜜桃| 中文精品在线观看| 欧美国产综合在线V| 黄污视频在线看| 日韩中文字幕在线视频观看| 欧美不卡视频| 精品在线99| 日韩在线视频在线观看| www.尤物.com| 中文字幕亚洲国产| 91精品国产手机| 在线欧美一级视频| 日韩中文字幕第一页| 深夜福利一区| 国产超级va在线视频| 精品一二三区| 粉嫩喷白浆久久| 国产在线一区二区视频| 亚洲理论中文字幕| 欧美日韩国产中文| 97久久精品午夜一区二区| 欧美一卡2卡3卡4卡| 日韩欧美不卡视频| 91精品国产丝袜白色高跟鞋| 精品国自产在线观看| 伊人亚洲视频| 日韩高清不卡一区| 日韩黄色在线播放| 国产婷婷一区二区| 亚洲黄色在线观看| 精品久久久久久无| 中文字幕无线码一区| 亚洲国产专区| 日韩在线高清视频| 日韩在线小视频| 国产综合精品在线| 中文字幕视频在线免费欧美日韩综合在线看 | av一区在线观看| 精品日韩av| 免费看日韩精品| 精品日韩视频在线观看| 91麻豆精品在线| 91精品免费观看| 日韩国产欧美在线视频| 国产区高清在线| 国产蜜臀在线| 国产欧美日韩中文久久| www.中文字幕在线| 91精品国产自产在线观看永久∴| 日韩欧美在线网址| 中文不卡在线| 日韩精品 欧美| 精品成人久久久| 亚洲免费福利视频| 91蜜桃在线视频| 丰满少妇一区| 玖玖在线免费视频| 91麻豆精品国产91久久久使用方法| av免费在线不卡| 成年人黄国产| 九九视频精品免费| 欧美日本精品| 成人xxxx| 国产视频一二区| 91精品高清| 日韩亚洲欧美中文高清在线| 欧美久久久网站| 国产三级第一页| 欧美黄页在线免费观看| 在线国产一级| 日韩视频一区| 欧美中文字幕在线观看视频| 一区二区不卡久久精品| 91精品国产综合久久香蕉的特点 | 欧美日韩一区二区在线视频| 精品福利二区三区| 一区二区三区精品99久久| 中文字幕日韩在线观看| 中文欧美字幕免费| 欧洲精品久久久| 日韩精品在线免费观看视频| 亚洲大片精品永久免费| 国产欧美久久久久久久久| 国产欧美日韩中文字幕在线| 亚洲国内精品视频| 欧美日韩在线播放视频| 亚洲免费福利视频| 久久精品久久久久| 日韩三级高清在线| 国产精品一区二区三区免费观看| 日韩欧美色综合网站| 欧美1234区| 精品人妻一区二区免费视频| 日韩在线精品视频| 日韩中文字幕视频在线观看| 国产免费播放一区二区| 日本精品二区| 中文字幕亚洲在| 中文精品在线| 香蕉av一区| 91精品国产入口| 国产欧美日韩久久| 国产中文在线播放| 日韩视频免费直播| 国产一区 二区 三区一级| 精品三区视频| 国产黄色片大全| 男人的天堂网av| 国产三级视频网站| 国产高清视频一区二区| 91精品国产综合久久久久久漫画| 精品日韩av一区二区| 国产资源中文字幕| 中文字幕国产视频| 精品视频在线导航| 欧洲精品二区| 日韩一级网站| 91欧美日韩麻豆精品| 欧美日韩国产一区在线| 国产手机视频一区二区| 视频一区二区国产| 在线欧美日韩精品| 欧美午夜影院在线视频| 精品欧美日韩在线| 999精品色在线播放| 日韩欧美一二三区| 日韩精品中文字幕第1页| 久久久精品免费免费| 欧美日韩在线视频首页| 一区二区欧美国产| 国产久卡久卡久卡久卡视频精品| 欧美国产91| 午夜黄色小视频| 欧美日韩一二| 91精品国产经典在线观看| 色偷偷一区二区三区| 欧美日韩在线观看成人| 欧美 日韩 国产在线| 日韩欧美国产三级| 麻豆精品视频入口| 亚洲视频在线观看日本a | 欧美日韩精品在线播放| 精品视频三区| 中文在线不卡| 中文欧美日韩| 精品久久香蕉国产线看观看gif| 精品1区2区3区| 日韩精品中文字幕第1页| 天堂在线一区二区三区| 中文字幕乱码在线| 伊人国产视频| 99精品免费观看| 中文字幕在线看视频国产欧美| 日本啊v在线| 国产在线观看黄色| 欧美日韩激情一区| 欧美日韩精品综合| 欧美不卡123| 色猫猫国产区一区二在线视频| 中文字幕在线精品| 国产永久免费高清在线观看| 极品久久久久久| 亚洲免费观看在线观看| а√天堂8资源中文在线| 国产香蕉免费精品视频| 国产成人中文字幕| 亚洲经典中文字幕| 国产欧美一级| 国产h片在线观看| 中文字幕最新精品| 色综合影院在线| 日韩欧美在线精品| av免费在线播放| 日韩精品在线观看网站| av三级在线播放| 中文字幕欧美日韩精品| 一级特黄大欧美久久久| 国产乱国产乱300精品| 欧美日韩国产首页| 欧美亚洲国产免费| 日韩三级一区| 日韩av一区在线| 日韩中文字幕国产| 久久精品免费在线观看| 免费看黄资源大全高清| 欧美亚洲综合视频| 亚洲欧美久久久| 91九色在线看| 日韩不卡av| 日韩国产在线观看一区| 91精品国产色综合久久不卡蜜臀| 日韩不卡一二三区| 欧美日韩国产第一页| 中文字幕最新精品| 亚洲精品欧美二区三区中文字幕| 在线观看免费国产成人软件| 欧美一级欧美三级在线观看| 欧美不卡123| 中文在线а√在线8| 精品日韩视频在线观看| 欧美乱大交xxxxx另类| 日韩美女中文字幕| 精品日韩在线| 中文字幕日韩免费视频| 九色蝌蚪视频在线| 视频一区三区| 国产在线观看精品| 国精品产品一区| 中文字幕在线观看视频www| 欧美日韩中文字幕在线视频| 国产综合成人久久大片91| 美女尤物久久精品| 日韩欧美国产高清91| 亚洲一区在线观看视频| 欧美日韩性视频| 婷婷久久综合网| 一级日韩一级欧美| 91精品国产手机| 国产欧美中文在线| 日韩欧美在线影院| 亚洲免费观看视频| 欧美不卡一二三| 日本视频久久久| 欧美日韩人人澡狠狠躁视频| 国产视频一二区| 欧美日韩中文字幕日韩欧美| 九九精品调教| 在线国产一级| 精品日韩视频| www.老鸭窝.com| 国产99在线 | 亚洲| 欧美日韩视频免费看| 丰满少妇一区| 国产成人精品三级| 精品对白一区国产伦| 91九色精品视频| 国产中文伊人| 亚洲欧美中文在线视频| 午夜高潮免费视频| 精品一区二区在线观看视频| 国产欧美久久久久久久久| av首页在线| 日韩美女中文字幕| 国产色在线视频| 欧美 日韩 中文字幕| 日韩午夜黄色| 91精品网站| 91精品国产综合久久久久久| 香蕉av一区| 久久91精品视频| 精品日韩在线观看| 国产 日韩 欧美 综合| 精品视频在线视频| 国产高清视频一区二区| 人妻一区二区三区免费| 欧美日韩国产系列| 中文字幕第一页在线播放| 亚洲高清免费一级二级三级| 亚洲一区资源| 日韩一级中文字幕| 色99中文字幕| 日本熟女一区二区| 欧美黄页在线免费观看| 精品久久久91| 99精品视频国产| 91亚洲国产| 中文不卡在线| 亚洲第一精品在线| 国产一区在线精品| 92久久精品| 亚洲男女av一区二区| 91精品视频国产| 亚洲综合日韩| 精品视频—区二区三区免费| 中文官网资源新版中文第二页在线观看| 国产香蕉精品视频| 在线视频不卡国产V| 亚洲免费中文字幕| 一区二区不卡久久精品| 人妻一区二区三区免费| 最新中文字幕在线| 日韩精品 欧美| 日本一级一片免费视频| 日韩视频在线观看视频| 日韩av一区二| 黄色国产在线| 国产欧美日韩精品高清二区综合区| 国产欧美日韩不卡| 日韩国产亚洲欧美| 欧美三级网址| 日韩精品视频中文字幕| 日韩一级在线免费观看| 中文字幕五月天| 不卡福利视频| 欧美午夜精品在线| 日韩精品免费视频一区二区三区| 日韩国产一区| 中文字幕日韩欧美| 日韩精品视频在线观看网址| 日韩色在线观看| 91精品国产亚洲| 一区二区三区中文字幕在线观看| 国产欧美日韩不卡| 国产不卡一区| 精人妻一区二区三区| 国产欧亚日韩视频| 欧美在线视频第一页| 亚洲一区视频在线观看视频| 欧美一级在线观看| 欧美亚洲国产免费| 欧美日韩高清在线播放| 日韩精品视频免费看| 国产99对白在线播放| 日韩精品丝袜在线| 日韩欧美国产午夜精品| 国产三级在线观看视频| 97国产视频| 一区二区三区精品在线| 日本亚洲视频在线| www中文字幕在线观看| 一区二区日韩av| 91精品国产91久久久久| 欧美日韩成人一区二区| 国产在线一在线二| 亚洲日产av中文字幕| 免费高清在线一区| 国产一级片播放| 色综合天天综合网天天狠天天| 中文字幕综合在线| 亚洲羞羞网站| 亚洲素人一区二区| 亚洲成年人影院在线| 欧美日韩成人一区| 久久婷婷中文字幕| 日韩欧美国产综合| 中文字幕日韩高清| 一级片在线播放|