亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 網站 > Apache > 正文

Apache Hadoop版本詳解

2024-08-27 18:30:49
字體:
來源:轉載
供稿:網友

由于Hadoop版本混亂多變,因此,Hadoop的版本選擇問題一直令很多初級用戶苦惱。本文總結了ApacheHadoop和Cloudera Hadoop的版本衍化過程,并給出了選擇Hadoop版本的一些建議。

1.Apache HadoopApache版本衍化

截至目前(2012年12月23日),ApacheHadoop版本分為兩代,我們將第一代Hadoop稱為Hadoop 1.0,第二代Hadoop稱為Hadoop2.0。第一代Hadoop包含三個大版本,分別是0.20.x,0.21.x和0.22.x,其中,0.20.x最后演化成1.0.x,變成了穩定版,而0.21.x和0.22.x則NameNodeHA等新的重大特性。第二代Hadoop包含兩個版本,分別是0.23.x和2.x,它們完全不同于Hadoop1.0,是一套全新的架構,均包含HDFS Federation和YARN兩個系統,相比于0.23.x,2.x增加了NameNodeHA和Wire-compatibility兩個重大特性。

經過上面的大體解釋,大家可能明白了Hadoop以重大特性區分各個版本的,總結起來,用于區分Hadoop版本的特性有以下幾個:

(1)Append支持文件追加功能,如果想使用HBase,需要這個特性。

(2)RAID在保證數據可靠的前提下,通過引入校驗碼較少數據塊數目。詳細鏈接:

https://issues.apache.org/jira/browse/HDFS/component/12313080

(3)Symlink支持HDFS文件鏈接,具體可參考:https://issues.apache.org/jira/browse/HDFS-245

(4)SecurityHadoop安全,具體可參考:https://issues.apache.org/jira/browse/HADOOP-4487

(5)NameNodeHA具體可參考:https://issues.apache.org/jira/browse/HDFS-1064

(6)HDFSFederation和YARN

apache,hadoop
 

需要注意的是,Hadoop2.0主要由Yahoo獨立出來的hortonworks公司主持開發。

Apache版本下載

(1)各版本說明:http://hadoop.apache.org/releases.html。

(2)下載穩定版:找到一個鏡像,下載stable文件夾下的版本。

(3)Hadoop最全版本:http://svn.apache.org/repos/asf/hadoop/common/branches/,可直接導到eclipse中。

2.Cloudera HadoopCDH版本衍化

Apache當前的版本管理是比較混亂的,各種版本層出不窮,讓很多初學者不知所措,相比之下,Cloudera公司的Hadoop版本管理的要很多。

我們知道,Hadoop遵從Apache開源協議,用戶可以免費地任意使用和修改Hadoop,也正因此,市面上出現了很多Hadoop版本,其中比較出名的一是Cloudera公司的發行版,我們將該版本稱為CDH(ClouderaDistributionHadoop)。截至目前為止,CDH共有4個版本,其中,前兩個已經不再更新,最近的兩個,分別是CDH3(在Apache Hadoop0.20.2版本基礎上演化而來的)和CDH4在Apache Hadoop2.0.0版本基礎上演化而來的),分別對應Apache的Hadoop 1.0和Hadoop2.0,它們每隔一段時間便會更新一次。

apache,hadoop
 

Cloudera以patch level劃分小版本,比如patch level為923.142表示在原生態Apache Hadoop0.20.2基礎上添加了1065個patch(這些patch是各個公司或者個人貢獻的,在Hadoopjira上均有記錄),其中923個是最后一個beta版本添加的patch,而142個是穩定版發行后新添加的patch。由此可見,patchlevel越高,功能越完備且解決的bug越多。

Cloudera版本層次更加清晰,且它提供了適用于各種操作系統的Hadoop安裝包,可直接使用apt-get或者yum命令進行安裝,更加省事。

CDH版本下載

(1)版本含義介紹:

https://ccp.cloudera.com/display/DOC/CDH+Version+and+Packaging+Information

(2)各版本特性查看:

https://ccp.cloudera.com/display/DOC/CDH+Packaging+Information+for+Previous+Releases

(3)各版本下載:

CDH3:http://archive.cloudera.com/cdh/3/

CDH4:http://archive.cloudera.com/cdh4/cdh/4/

注意,Hadoop壓縮包在這兩個鏈接中的最上層目錄中,不在某個文件夾里,很多人進到鏈接還找不到安裝包!

3.如何選擇Hadoop版本

當前Hadoop版本比較混亂,讓很多用戶不知所措。實際上,當前Hadoop只有兩個版本:Hadoop1.0和Hadoop 2.0,其中,Hadoop1.0由一個分布式文件系統HDFS和一個離線計算框架MapReduce組成,而Hadoop2.0則包含一個支持NameNode橫向擴展的HDFS,一個資源管理系統YARN和一個運行在YARN上的離線計算框架MapReduce。相比于Hadoop1.0,Hadoop 2.0功能更加強大,且具有更好的擴展性、性能,并支持多種計算框架。

當我們決定是否采用某個軟件用于開源環境時,通常需要考慮以下幾個因素:

(1)是否為開源軟件,即是否免費。

(2)是否有穩定版,這個一般軟件官方網站會給出說明。

(3)是否經實踐驗證,這個可通過檢查是否有一些大點的公司已經在生產環境中使用知道。

(4)是否有強大的社區支持,當出現一個問題時,能夠通過社區、論壇等網絡資源快速獲取解決方法。

考慮到以上幾個因素,我們分析一下開源軟件Hadoop。對于Hadoop2.0而言,目前尚不穩定,無法用于生產環境,因此,如果當前你正準備使用Hadoop,那么只能從Hadoop1.0中選擇一個版本,而目截至目前(2012年12月23日),Apache和Cloudera最新的穩定版分別是Hadoop1.0.4和CDH3U4,因此,你可以從中任選一個使用。

總結

以上所述是小編給大家介紹的Apache Hadoop版本詳解,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對VEVB武林網網站的支持!


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
国产欧美中文字幕| 国产免费一区二区三区香蕉精| 亚洲综合国产精品| 欧美激情在线一区| 69久久夜色精品国产7777| 在线不卡国产精品| 78色国产精品| 一本一本久久a久久精品综合小说| 日韩在线一区二区三区免费视频| 亚洲精品久久久久中文字幕二区| 深夜福利日韩在线看| 欧美性xxxxx极品| 插插插亚洲综合网| 亚洲伊人成综合成人网| 精品五月天久久| 欧美成人精品xxx| 欧美极品在线视频| 日本精品在线视频| 国产日韩视频在线观看| 日韩在线观看免费av| 国产一区二区三区在线观看网站| 成人激情春色网| 亚洲自拍偷拍区| 国产欧美精品日韩精品| 国产视频在线一区二区| 久久不射热爱视频精品| 91久久嫩草影院一区二区| 日韩成人久久久| 国产精品网红直播| 欧美成人一区在线| 欧美激情精品久久久久久变态| 亚洲精品一区中文字幕乱码| 91精品国产高清久久久久久| 成人福利在线观看| 最新国产成人av网站网址麻豆| 国产成人精品a视频一区www| 成人午夜在线视频一区| 国产高清视频一区三区| 8090成年在线看片午夜| 国产精品自产拍在线观看中文| 国产精品日日摸夜夜添夜夜av| 91香蕉嫩草神马影院在线观看| 久久视频在线直播| 国产精品成久久久久三级| 黑人与娇小精品av专区| 久久久亚洲福利精品午夜| www国产精品com| 欧美午夜片在线免费观看| 日韩在线观看成人| 欧美日韩免费在线| 国产日韩视频在线观看| 在线播放国产一区中文字幕剧情欧美| 精品国产自在精品国产浪潮| 亚洲第一视频网站| 国产精品入口夜色视频大尺度| 久久精品美女视频网站| 视频在线观看99| 九九久久久久久久久激情| 久久久久久久久久久免费| 日韩乱码在线视频| 精品国产乱码久久久久久虫虫漫画| 5566成人精品视频免费| 国产精品爽爽爽爽爽爽在线观看| 欧美激情videoshd| 亚洲www在线观看| 中文字幕在线成人| 日韩电视剧在线观看免费网站| 日韩美女免费观看| 久久人人爽人人| 91久久精品久久国产性色也91| 91精品国产高清久久久久久| 一本色道久久88精品综合| 丝袜亚洲欧美日韩综合| 日韩国产精品视频| 日韩中文视频免费在线观看| 青青草99啪国产免费| 国产精品h片在线播放| 日韩av在线免费观看| 国产欧美精品在线播放| 亚洲日本欧美日韩高观看| 欧美电影在线观看网站| 欧美精品久久久久a| 57pao成人国产永久免费| 在线一区二区日韩| 国产精品一区二区三| 亚洲色图色老头| 国产精品一区电影| 国产精品久久不能| 国产一区二区三区毛片| 久久视频免费观看| 精品国产91乱高清在线观看| 亚洲美女av网站| 久久精品国产一区二区电影| 日韩在线视频免费观看高清中文| 欧美第一黄色网| 日韩高清av一区二区三区| 亚洲欧美精品中文字幕在线| 国内精品小视频| 国产精品亚洲第一区| 欧美片一区二区三区| 热久久99这里有精品| 欧美在线性视频| 九九热r在线视频精品| 国产一区二区三区日韩欧美| 韩国美女主播一区| 亚洲成人黄色网址| 久久久久久噜噜噜久久久精品| 91在线观看免费高清完整版在线观看| 国产成人综合精品在线| 亚洲一区中文字幕在线观看| 热99精品只有里视频精品| 国产婷婷色综合av蜜臀av| 97超级碰碰人国产在线观看| 久久久久www| 中文字幕久久久av一区| 欧美成年人视频网站| 久久香蕉国产线看观看av| 国产精品久久久久9999| 欧美精品免费看| 成人激情av在线| 国产午夜精品理论片a级探花| 日韩高清电影免费观看完整| 日韩欧美中文字幕在线观看| 欧美激情视频给我| 色中色综合影院手机版在线观看| 国产精品成人在线| 国产日韩欧美日韩大片| 亚洲第一页中文字幕| 欧美亚洲在线播放| 日韩免费观看av| 日韩av在线高清| 日韩成人激情在线| 97香蕉久久夜色精品国产| 国产美女精品免费电影| 亚洲午夜未删减在线观看| 91久久久亚洲精品| 久久综合伊人77777尤物| 亚洲第一偷拍网| 国产精品草莓在线免费观看| 国产成人免费av电影| 国产丝袜一区视频在线观看| 久久久久久伊人| 成人性生交大片免费观看嘿嘿视频| 夜夜狂射影院欧美极品| 久久久久久高潮国产精品视| 黑人狂躁日本妞一区二区三区| 国产精品自产拍在线观看中文| 欧美专区在线观看| 97精品一区二区三区| 久久艳片www.17c.com| 国产福利视频一区二区| 亚洲在线免费视频| 国产一区二区三区视频在线观看| 久久久久久久久久国产精品| 国产精品爽爽爽爽爽爽在线观看| 欧美重口另类videos人妖| 国产亚洲精品美女久久久久| 国产欧美一区二区三区四区| 亚洲网站在线播放| 欧美日韩国产一区二区三区| 久久精品国产99国产精品澳门| 中文字幕无线精品亚洲乱码一区| 亚洲黄页网在线观看| 欧美性受xxxx白人性爽|