這篇文章主要介紹Hadoop怎么設(shè)置HDFS的塊大小，文中介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們一定要看完！

創(chuàng)新互聯(lián)是專業(yè)的昭化網(wǎng)站建設(shè)公司，昭化接單;提供成都網(wǎng)站建設(shè)、網(wǎng)站建設(shè),網(wǎng)頁設(shè)計(jì),網(wǎng)站設(shè)計(jì),建網(wǎng)站,PHP網(wǎng)站建設(shè)等專業(yè)做網(wǎng)站服務(wù);采用PHP框架,可快速的進(jìn)行昭化網(wǎng)站開發(fā)網(wǎng)頁制作和功能擴(kuò)展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團(tuán)隊(duì),希望更多企業(yè)前來合作!

  HDFS是設(shè)計(jì)來存儲(chǔ)和管理大數(shù)據(jù)的，因此典型的HDFS塊大小明顯比平時(shí)我們看到的傳統(tǒng)文件系統(tǒng)塊大得多，塊大小的設(shè)置用來將大文件切割成一個(gè)數(shù)據(jù)塊，再將這些數(shù)據(jù)塊分發(fā)到集群上，例如集群的塊大小設(shè)置為64MB,一個(gè)128MB的文件上傳到HDFS上，HDFS會(huì)將這個(gè)文件切分成2(128/64)個(gè)數(shù)據(jù)塊，再將這兩塊數(shù)據(jù)分發(fā)到集群的數(shù)據(jù)節(jié)點(diǎn)上。
設(shè)置塊大小：
打開hdfs-site.xml,(在hadoop安裝目錄下的conf文件夾里)
操作步驟：
設(shè)置hdfs-site.xml下面的屬性值:
<property>
<name>dfs.block.size</name>
<value>134217728</value>    --修改為128M
<description>Block size</description>
</property>


修改說明:
hdfs-site.xml是HDFS的配置文件，修改hdfs-site.xml配置文件的dfs.block.size屬性值就會(huì)改變上傳到HDFS所有文件的默認(rèn)塊大小。修改這個(gè)值并不會(huì)對(duì)HDFS上現(xiàn)存的任何文件的塊大小產(chǎn)生影響，只會(huì)改變新上傳文件的塊大小。

以上是“Hadoop怎么設(shè)置HDFS的塊大小”這篇文章的所有內(nèi)容，感謝各位的閱讀！希望分享的內(nèi)容對(duì)大家有幫助，更多相關(guān)知識(shí)，歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道！

當(dāng)前文章：Hadoop怎么設(shè)置HDFS的塊大小
標(biāo)題URL：http://www.aaarwkj.com/article12/pegodc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供動(dòng)態(tài)網(wǎng)站、服務(wù)器托管、外貿(mào)網(wǎng)站建設(shè)、商城網(wǎng)站、、做網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)