
【hadoop是做什么的 hadoop的資料】1、Hadoop主要是分布式計(jì)算和存儲(chǔ)的框架,所以Hadoop工作過程主要依賴于HDFS(Hadoop Distributed File System)分布式存儲(chǔ)系統(tǒng)和Mapreduce分布式計(jì)算框架 。
2、分布式存儲(chǔ)系統(tǒng)HDFS中工作主要是一個(gè)主節(jié)點(diǎn)namenode(master)(hadoop1.x只要一個(gè)namenode節(jié)點(diǎn),2.x中可以有多個(gè)節(jié)點(diǎn))和若干個(gè)從節(jié)點(diǎn)Datanode(數(shù)據(jù)節(jié)點(diǎn))相互配合進(jìn)行工作 。
3、HDFS主要是存儲(chǔ)Hadoop中的大量的數(shù)據(jù),namenode節(jié)點(diǎn)主要負(fù)責(zé)的是:接收client用戶的操作請(qǐng)求,這種用戶主要指的是開發(fā)工程師的Java代碼或者是命令客戶端操作 。維護(hù)文件系統(tǒng)的目錄結(jié)構(gòu),主要就是大量數(shù)據(jù)的關(guān)系以及位置信息等 。管理文件系統(tǒng)與block的關(guān)系 。
4、Hadoop中大量的數(shù)據(jù)為了方便存儲(chǔ)和管理主要是以block塊(64M)的形式儲(chǔ)存 。一個(gè)文件被分成大量的block塊存儲(chǔ)之后,block塊之間都是有順序關(guān)系的,這個(gè)文件與block之間的關(guān)系以及block屬于哪個(gè)datanode都是有namenode來管理 。
猜你喜歡
- 鋼鐵是怎么樣煉成的關(guān)于生命的格言
- 王者和吃雞的健康時(shí)間是共享的嗎
- 纖維的成分是什么 膳食纖維的主要成分是什么
- 藍(lán)鯨的寓意是什么 藍(lán)鯨的寓意指什么
- 百度機(jī)器人是什么
- 一般罐頭食品的保質(zhì)期很長這主要是因?yàn)?一般罐頭食品的保質(zhì)期很長原因解析
- 巴西比戈是什么東西?
- 雪佛蘭是哪國的品牌 雪佛蘭是哪里的
- 侵占罪相關(guān)法律法規(guī)的規(guī)定是什么
- 茄子燒雞軟骨步驟 茄子燒雞軟骨做法
