亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 系統(tǒng) > Fedora > 正文

fedora20安裝hadoop-2.5.1

2024-06-28 13:24:08
字體:
供稿:網(wǎng)友
fedora20安裝hadoop-2.5.1

(博客園-番茄醬原創(chuàng))

首先感謝作者lxdhdgss,他的博文直接幫助了我如何安裝hadoop,下面是他的博文修改版,用于安裝在fedora20上面的,jdk1.8版本。

到hadoop官網(wǎng)去copy一下鏈接地址(hadoop2.5.1的地址http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.5.1/hadoop-2.5.1.tar.gz),在終端wget url(下載鏈接地址),會直接下載到當(dāng)前目錄下。然后解壓,tar xvf apache-hadoop-2.5.1.tar.gz,解壓下載的tar.gz。會看到一個(gè)名為hadoop-2.5.1的文件夾,把它拷貝到自己平時(shí)安裝軟件的地方,比如我是/opt/lib64/下面,命令是mv hadoop-2.5.1 /opt/lib64/。

注意:下面修改的時(shí)候,大家不會用vi,就用gedit來代替吧,可視化操作,簡潔明了。如vi xxx可以換成gedit xxx

下面就需要對Hadoop進(jìn)行設(shè)置了。

首先vi /etc/PRofile,增加

bash代碼

1     #設(shè)置jdk的安裝路徑2     export java_HOME=/opt/lib64/jdk1.8.0_203     #指定CLASSPATH和PATH4     export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib5     export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin6     #設(shè)置的hadoop的環(huán)境變量7     export HADOOP_HOME=/opt/lib64/hadoop-2.5.18     export PATH=$HADOOP_HOME/bin:$PATH9     export CLASSPATH=$HADOOP_HOME/lib:$CLASSPATH

保存退出(按下ESC,然后再按下這三個(gè):wq)

哦,別忘了在終端執(zhí)行命令下source /etc/profile,讓修改過的profile馬上生效。

然后進(jìn)入hadoop下面的etc/hadoop/(不是系統(tǒng)的etc,是hadoop下面的etc,這是一個(gè)配置文件夾),用ls命令,可以看到有很多配置文件。

先vi hadoop-env.shbash代碼export JAVA_HOME=/opt/lib64/jdk1.8.0_20vi yarn-env.sh bash代碼export JAVA_HOME=/opt/lib64/jdk1.8.0_20

vi core-site.xml

 <configuration>     <property>     <name>fs.default.name</name>    <value>hdfs://localhost:9000</value>   </property>  <property>   <name>hadoop.tmp.dir</name>   <value>/home/hadoop/xxx/tmp </value></property> </configuration> 

保存退出(按下ESC,然后再按下這三個(gè):wq)

vi hdfs-site.xml

Xml代碼

 1 <configuration>   2   <property>   3      <name>dfs.namenode.name.dir</name>   4     <value>file:/home/hadoop/dfs/name</value>   5   </property>   6   <property>   7      <name>dfs.namenode.data.dir</name>   8      <value>file:/home/hadoop/dfs/data</value>   9   </property>  10   <property>  11      <name>dfs.replication</name>  12      <value>1</value>  13   </property>  14 </configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

----------------------------按照hadoop官網(wǎng)上面的配置-----------------------

vi mapred-site.xml

Xml代碼

<configuration>     <property>          <name>mapreduce.jobtracker.address</name>          <value>localhost:9001</value>     </property>     <property>         <name>mapreduce.framework.name</name>         <value>yarn</value>     </property></configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

vi yarn-site.xml:

Xml代碼

1 <configuration>2     <property>3         <name>yarn.nodemanager.aux-services</name>4         <value>mapreduce_shuffle</value>5     </property>6 </configuration>

保存退出(按下ESC,然后再按下這三個(gè):wq)

-------------------------------------------------------------------------------

-------------------------補(bǔ)充---------------ssh免登陸設(shè)置

還有就是:由于原文沒有設(shè)置如何面驗(yàn)證登陸ssh,這邊給與補(bǔ)充。

由于fedora已經(jīng)默認(rèn)安裝了openssh,所以不用再此安裝ssh了。直接直接配置以下就可以了

配置 SSH 免密碼登陸 ,下面是bash命令,直接在終端輸入(最好是root身份,如何root?只要終端輸入su,然后root的密碼就可以登陸root賬戶了)

  1. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
  2. cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
  3. chmod 600 ~/.ssh/authorized_keys
  4. sudo service sshd restart

就可以了。到此就大功告成了

-----------------------------------------------------------------------------

好了,現(xiàn)在可以啟動看看了

先格式化,這個(gè)很重要。

bash命令
  1. hadoopnamenode-format

這句話基本上就是把目前你的hadoop系統(tǒng)確定一下結(jié)構(gòu),我們的hadoop系統(tǒng)中,一般是一個(gè)namenode+多個(gè)datanode。

namenode相當(dāng)于顧客房間表,datanode相當(dāng)于具體的房間。

然后啟動hadoop吧。

到hadoop的根目錄,

bash命令
  1. sbin/start-dfs.sh

然后再啟動yarn,因?yàn)?.5.0的版本,早就已經(jīng)是以yarn這種更好的架構(gòu)來運(yùn)行了。

終端顯示Starting namenodes on [localhost]root@localhost's passWord: localhost: starting namenode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-namenode-localhost.localdomain.outroot@localhost's password: localhost: starting datanode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-datanode-localhost.localdomain.outStarting secondary namenodes [0.0.0.0]root@0.0.0.0's password: 0.0.0.0: starting secondarynamenode, logging to /opt/lib64/hadoop-2.5.1/logs/hadoop-root-secondarynamenode-localhost.localdomain.out

終端顯示
  1. sbin/start-yarn.sh

然后查看一下開啟的進(jìn)程

bash命令
  1. jps
終端顯示 [root@localhost hadoop-2.5.1]# jps30305 DataNode26243 org.eclipse.equinox.launcher_1.3.0.v20140415-2008.jar26645 org.eclipse.equinox.launcher_1.3.0.v20120522-1813.jar30583 SecondaryNameNode8216 ResourceManager30092 NameNode30831 Jps8511 NodeManager

說明hadoop已經(jīng)啟動成功。

打開hdfs管理頁面,查看hdfs系統(tǒng):

在瀏覽器打開http://localhost:50070,可看到hadoop的管理界面,導(dǎo)航欄的最后一項(xiàng)還可以查看hadoop里面的文件。

我們來試著傳個(gè)文件,到/home下面,新建一個(gè)文件,vim test.txt,隨便寫些東西。保存。

然后把這個(gè)文件上傳。

打開job管理頁面,查看job的運(yùn)行情況:

由于這個(gè)是hadoop2.5.1版本,貌似以前的http://localhost:50030換成了現(xiàn)在的http://localhost:8088,所以需要查看jod的運(yùn)行情況,需要在瀏覽器打開localhost:8088

現(xiàn)在的ResourceManager和NodeManager代替了原來的JobTracker和TaskTracker

bash命令
  1. hadoopfs-puttest.txt/test.first (表示將本地的text放置在dfs根目錄下,并且名為test.first可以隨意命名)

在瀏覽器的后臺刷新看看有沒有test.first(打開http://localhost:50070,選擇utilties在點(diǎn)擊browse the file system)。

你也可以先給hadoop建立目錄

bash命令
  1. hadoopfs-mkdir/xxx

上面的上傳文件也可以變成這樣:

bash命令
  1. hadoopfs-puttest.txt/xxx/test.txt

其他的操作,大家自己去試吧。

特別感謝lxdhdgss,他的博文地址是:http://www.CUOxin.com/topic/1135085

(官網(wǎng)有英文版的配置說明,大家可以參照http://hadoop.apache.org/docs/r2.5.1/hadoop-project-dist/hadoop-common/SingleCluster.html#Configuration)


發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
麻豆国产一区二区三区四区| 久草视频这里只有精品| 日韩亚洲欧美中文字幕| 成人午夜在线播放| 亚洲国产精品天堂| 亚洲热在线观看| 97国产成人高清在线观看| 无码视频在线观看| 午夜免费看毛片| 91一区二区在线| 精品日韩一区二区三区| 国产激情综合五月久久| 亚洲男人天堂影院| 韩国三级在线一区| 97aⅴ精品视频一二三区| 免费国产阿v视频在线观看| 国产精品久久久久久| 性一交一乱一区二区洋洋av| 韩国一区二区电影| av成人在线看| 二区三区偷拍浴室洗澡视频| 一本久道久久综合中文字幕| 好吊妞无缓冲视频观看| 久草福利资源在线视频| 麻豆影视国产在线观看| 亚洲色欲久久久综合网东京热| 在线观看wwww| 91丨porny丨国产| 黄色www在线观看| 在线国产1区| 欧美三级特黄| 亚洲精品一卡二卡三卡四卡| 在线视频国产区| 少妇精品久久久| 91视频在线免费观看| 97影院在线午夜| 亚洲色图欧美视频| jizz在线观看视频| 激情文学综合插| 日韩精品久久理论片| 日韩一区二区免费在线电影| 99c视频在线| 国产不卡一区二区在线播放| 国产不卡精品一区二区三区| 精品日韩美女| 久草在线在线视频| 国产精品自拍偷拍视频| 亚洲一区二区精品视频| 香蕉久久夜色精品国产| 亚洲精品伦理在线| 超碰在线免费97| 欧美一区二区三区婷婷| 黄色三级在线| 在线观看亚洲视频| 又黄又骚的视频| 青青青草视频在线| 日本视频三区| 国产美女网站在线观看| 极品盗摄国产盗摄合集| 一个色妞综合视频在线观看| 亚洲美腿欧美激情另类| 免费观看亚洲| 国产精品99爱免费视频| 精品国产乱码久久久久久鸭王1| 欧美日韩在线精品一区二区三区激情| av免费看大片| 久久影视中文粉嫩av| 91精品国产一区二区三区香蕉| 日本在线观看天堂男亚洲| 日本韩国欧美超级黄在线观看| 国产亚洲精品久久久久久无几年桃| 2021年精品国产福利在线| 免费三级在线观看| 好色视频app| 97超碰蝌蚪网人人做人人爽| 国产尤物久久久| 一区二区三区在线观看免费视频| 成人性片免费| av首页在线| 亚洲av永久纯肉无码精品动漫| 中文精品一区二区三区| 亚洲免费婷婷| 日本簧片在线观看| 国产精选久久久久久| 丁香久久五月| 高清国产福利在线观看| 五十路熟女丰满大屁股| 久久av一区二区三区漫画| 国产片乱18免费| 日韩一区二区精品葵司在线| 羞羞的网站在线观看| 日韩欧美中文免费| 日韩国产亚洲欧美| 黄色的视频在线免费观看| 男人添女荫道口女人有什么感觉| 亚洲天堂日韩在线| 国产电影一区二区| 热99re久久精品精品免费| 国产自产一区二区| 成人欧美一区二区三区在线| 亚洲天堂视频在线观看| 亚洲日本欧美天堂| 欧美91精品久久久久国产性生爱| 精品久久久久久久久久久院品网| 日韩电视剧免费观看网站| www.国产精品视频| 少妇激情一区二区三区视频| 国产不卡一区| 精品人妻少妇嫩草av无码| 天堂在线中文网官网| 中文字幕免费在线不卡| 偷拍中文亚洲欧美动漫| 日韩成人免费看| 插吧插吧综合网| 999精品嫩草久久久久久99| 天天做天天爱天天高潮| 欧美在线精品一区| 偷拍25位美女撒尿视频在线观看| 日本国产中文字幕| 糖心vlog在线免费观看| 超碰成人在线播放| 久久男人天堂| 中文在线一区二区| 潘金莲激情呻吟欲求不满视频| 欧美日韩国产成人在线观看| 日本不卡免费新一二三区| 亚洲国产一二三区| 亚洲欧美日韩国产| 国产乱对白刺激视频不卡| 日韩午夜精品视频| 中文字幕在线观看不卡视频| 亚洲成a人v欧美综合天堂麻豆| 国产又黄又猛又粗又爽| 婷婷激情图片久久| 黄动漫在线免费观看| 成人久久久精品乱码一区二区三区| √最新版天堂资源网在线| 久久久久久久久亚洲| 99这里有精品| 亚洲国产综合网| 免费一级欧美在线观看视频| 久久免费手机视频| 久久综合国产精品| 91精品丝袜国产高跟在线| 九九爱免费视频在线观看| 欧美精品在线观看91| 久久综合久久久久88| 日本动漫理论片在线观看网站| 一二三四视频在线社区中文字幕2| 红桃成人av在线播放| 日韩在线免费电影| 日韩精品中文字幕在线播放| 日本系列欧美系列| 欧美三级视频| 人妖精品videosex性欧美| 亚洲国产裸拍裸体视频在线观看乱了中文| 免费高潮视频95在线观看网站| 日本福利视频导航| 日韩欧美第二区在线观看| 人妻少妇精品久久| 亚洲久久久久久久久久久| 欧美xx视频| 极品日韩av| 欧美精品色哟哟| 日韩成人性视频| 欧美区亚洲区| 先锋欧美三级| 手机看片1024久久| 欧美在线欧美在线| 四虎国产精品免费观看| 欧美中文字幕在线视频| 在线观看亚洲黄色| 欧美成人精品影院| 日韩三级电影网站| 免费无码国产精品| 一本大道久久a久久综合| 手机av免费在线观看| 国产亚洲欧美视频| 国产区精品视频| 欧美日韩1区2区| 午夜精品久久久久久久四虎美女版| 国产精品日韩一区二区免费视频| 亚洲黄色录像| 能看毛片的网站| 亚洲国产一区二区三区青草影视| av播放在线| 免费在线视频你懂的| 欧美色倩网站大全免费| 久久成人一区二区| 色窝窝无码一区二区三区成人网站| 欧美性生活大片视频| 国产成人精品免费久久久久| 一级黄色大片网站| 天堂tv亚洲tv日本tv欧美人tv| 国产区二区三区| 91丨porny丨最新| 欧美日韩亚洲三区| 成人爽a毛片免费啪啪动漫| 天堂精品在线视频| 久久亚洲影音av资源网| 成人444kkkk在线观看| 国产v综合v亚洲欧| 亚洲一区二区三区四区精品| 成人观看免费完整观看| 国产91精品精华液一区二区三区| 国产视频一区二区不卡| 91福利国产成人精品照片| 精品动漫一区| 91九色单男在线观看| 7777精品伊人久久久大香线蕉最新版| 二区三区四区高清视频在线观看| 欧美a级理论片| 国产在线播放一区二区| 亚洲欧美国产精品| 亚洲少妇一区二区三区| 主播福利视频一区| 老鸭窝亚洲一区二区三区| 亚洲欧洲精品一区二区精品久久久| 99久久久国产| 美女视频第一区二区三区免费观看网站| 无夜福利视频观看| 精品久久久久亚洲| 国产亚洲成人精品| 亚洲图片欧洲图片日韩av| 一区三区自拍| 一个人在线观看免费视频www| 成人av.网址在线网站| 日韩成人手机在线| 成人午夜精品一区二区三区| 147欧美人体大胆444| 国产日韩一区二区三区在线| 欧美xxxx性xxxxx高清| 日韩影视一区二区三区| 色视频www在线播放国产人成| 欧美一级免费片| 丰满人妻一区二区三区53号| 国产精品三级久久久久久电影| 欧美黑人ⅹxxx另类猛交| 日本久久久a级免费| 国产视频久久久久久久| 国产精品suv一区二区88| 亚洲精选成人| 成人免费a视频| 亚洲偷欧美偷国内偷| 欧美freesex黑人又粗又大| 欧美白嫩的18sex少妇| 天天综合网 天天综合色| 中日韩一区二区三区| 欧美日韩在线观看一区| 激情五月婷婷小说| 日韩精品一区在线观看| 婷婷色在线观看| 蜜臀av国内免费精品久久久夜夜| 91一区二区三区在线| 欧美综合一区二区三区| 亚洲最大av网| 色悠久久久久综合网小说| 国产超碰人人爽人人做人人爱| 国产一区亚洲二区| 亚洲精品国产a| 精品国产精品三级精品av网址| 国产精品1234| 精品黑人一区二区三区在线观看| 日韩免费电影一区| 国产精品乱码一区二区| 久久精品欧美一区二区三区麻豆| 色婷婷亚洲综合| 国产在线观看免费| 免费国产成人av| 精品日产免费二区日产免费二区| 日韩欧美卡一卡二| 精品久久中文字幕| 欧美精品一区二区三区在线| 91在线精品播放| 国产成人一区二区在线观看| 中国特级黄色大片| 999国产精品999久久久久久| 色老板在线视频一区二区| 在线免费看黄网站| 国产aa视频| 在线观看国产三级| 成人写真视频福利网| 久久色成人在线| 亚洲成av人片在线观看香蕉| 欧美xxxxhdvideosex| 亚洲成人激情社区| 欧美一级久久久久久久久大| 一区二区三区午夜| 欧美日韩网址| 免费观看一级一片| 91久久高清国语自产拍| 一色屋免费视频| jizz亚洲大全| 国产日韩欧美在线观看视频| 免费观看黄网站| 欧美大片第1页| 粉嫩av亚洲一区二区图片| 无码任你躁久久久久久老妇| 亚洲av无码一区二区三区性色| 极品一区美女高清| 日韩毛片在线看| 99福利在线| 你懂的在线观看| 91麻豆视频在线观看| 丰满人妻一区二区三区免费| 黄色动漫免费网站| 四虎永久网址| 97精品国产97久久久久久| 国产成人精品一区二区无码呦| 国产农村老头老太视频| 亚洲国产福利| 亚洲女人小视频在线观看| 久久99蜜桃精品| 视频一区在线| 希岛爱理av一区二区三区| 免费a级人成a大片在线观看| 欧美日韩成人在线| 无码国产精品96久久久久| 午夜69成人做爰视频| 电影在线观看一区二区| 国产一区二区视频播放| 国产精品白丝jk白祙喷水网站| yourporn在线观看视频| 精品国产大片大片大片| 亚洲欧美日韩一区| 久久久久电影| 牛牛精品一区二区| 亚洲av无码精品一区二区|