A. 搭建Hadoop集群,一個月6T的數量需要幾台伺服器
最好是兩個做成HA
關於硬碟:
6T的數據容量,看你副本數量設置是多少,一般默認為3,那麼僅這些就需要18T硬碟,稍微大一點20T吧;這僅僅是HDFS存儲;(這里我說的是一個月的,你數據保存幾個月,就乘幾倍)
如果你集群上面要跑計算,MR計算出來的數據要保存HDFS的,所以,還是要根據你的結果數據來做判斷,大小就看你計算任務了.
一般是這樣計算硬碟大小
(原始數據+中間數據+結果數據)*副本數量=總硬碟大小
關於內存:
namenode不用說了,主要就是用內存保存block和node之間對應關系的,也是要根據數據大小計算的,6T/Block大小(默認為128M)=有多少block-->M個
一個block佔多少內存: 保守地設置每一百萬數據塊需要1000MB內存
namenode總內存(兆M)=M*1000MB/100萬
datanode的內存: 一般問題不大,一般都是用於mr的計算,這個東西根據你性能的需要設置
關於多少台機器?
根據Task任務的數量和你的性能指標來做決定
一個Block對應一個Mapper任務,上面算出來M個Block了,mapper任務也是那麼多
實際測試一下,一定數據量在x台機器上運行時間,根據你的指標去評定要多少台機器
hadoop集群的性能和節點個數近似成正向關系
B. 一個Hadoop集群的機器數量最少要幾個

節選自《hadoop下的分布式搜索引擎》(太原理工大學),由此可見,hadoop多節點部署最少可以是2個節點,即一個NameNode和一個DataNode。
C. hadoop存儲容量,計算時需要多少容量
如果文件小於64MB,存儲按該文件的塊大小等於該文件的大小。
讀取時是根據存在namenode上面的映射表來讀取的。
按實際存儲的大小來讀取,不是從硬碟上面讀取的,是從HDFS
上面讀取的。
另外,在文件上傳時,就會根據塊的大小將各個塊分布到各個
datanode節點上面的。如果文件已經上傳,需要修改默認塊的大小,
那麼需要執行一條語句將HDFS上面的原有文件重新分塊並存儲。
D. hadoop集群生產中一般最少需要多少台伺服器
5台
dfs系統 3台 namenode ,secondaryname,datanode
mr系統 2台 resourcemanager和一台nodemanager
一套完整的hadoop要 dfs+mr的
E. 如何架構大數據系統 hadoop
大數據數量龐大,格式多樣化。大量數據由家庭、製造工廠和辦公場所的各種設備、互聯網事務交易、社交網路的活動、自動化感測器、移動設備以及科研儀器等生成。它的爆炸式增長已超出了傳統IT基礎架構的處理能力,給企業和社會帶來嚴峻的數據管理問題。因此必須開發新的數據架構,圍繞「數據收集、數據管理、數據分析、知識形成、智慧行動」的全過程,開發使用這些數據,釋放出更多數據的隱藏價值。
一、大數據建設思路
1)數據的獲得

四、總結
基於分布式技術構建的大數據平台能夠有效降低數據存儲成本,提升數據分析處理效率,並具備海量數據、高並發場景的支撐能力,可大幅縮短數據查詢響應時間,滿足企業各上層應用的數據需求。
F. Hadoop的搭建一般至少要多少台機器
這個要看你的需求,比如是生產環境還是測試用
如果是生產,要看你的數據量,需要的處理能力等
如果你只是學慣用,條件好點的,弄3台以上的機,一個namenode,兩個datanode
如果實在沒有條件,就兩台機,一個namenode一個datanode
實在沒有條件,就用一台機,裝幾個虛擬機
G. 學習hadoop需要哪些准備(知識硬體軟體)
1、安裝:HADOOP安裝在LINUX下,測試的話,安裝在windows的cpywin下也可。
2、開發:HADOOP開發,也就是MAPREDUCE開發。
要有java基礎,理解maprece編程理念。開發環境可以是ECLIPSE。不需要學hibernate,struts,SPRING等框架。
3、參考:http://www.hadoopor.com網站上,看看更多的內容。
希望對你有幫助
參考資料http://..com/question/357576874.html
H. 搭建一個用於科研的hadoop平台,都需要些什麼樣的設備
虛擬機。。。人家搞科研,這不科學吧。Hadoop特點就是可以部署在一些廉價的機器上,所以我覺得最主要是有一天強大的伺服器來作為Hadoop的Namenode,DataNode的機器就隨便點
I. 學習hadoop需要自己電腦什麼配置
您可以嘗試一下搭載了第六代智能英特爾酷睿處理器的產品,無縫融合的英特爾銳炬顯卡及核芯顯卡,小身材,大能量,澎湃性能的同時兼具酷冷低耗,驚人電池續航表現,3D應用及多媒體視覺體驗無與倫比,硬體級加速,完美暢享超高清4K視頻編碼及照片,同時支持栩栩如生的1080p高清視屏聊天。
全新一代銳炬Pro及銳炬顯卡,CPU內部新增圖形專用高速EDRAM緩存,帶來媲美中高端獨顯的極致游戲體驗。
Dell XPS 15 輕薄 SKL-H 15" Consumer 25-Oct
HP Spectre x360 2in1 i5/i7 Skylake 13" windows10
Dell Ins13BR-1708T I7-6500U SKL-U 13" Consumer 30-Sep
J. 想要搭建hadoop集群,想問一下應該配備什麼樣的硬體設備,順便給出每個硬體設備的大概價格。
可以用一台普通pc機,加虛擬機來完成小范圍集群配置