前言
因為比賽的限制是使用Hadoop2.7.2,估在此文章下面的也是使用Hadoop2.7.2,具體下載地址為Hadoop2.7.2
開始的準(zhǔn)備
目前在我的實驗室上有三臺Linux主機(jī),因為需要參加一個關(guān)于spark數(shù)據(jù)分析的比賽,所以眼見那幾臺服務(wù)器沒有人用,我們團(tuán)隊就拿來配置成集群。具體打算配置如下的集群
主機(jī)名 | IP地址(內(nèi)網(wǎng)) |
---|---|
SparkMaster | 10.21.32.106 |
SparkWorker1 | 10.21.32.109 |
SparkWorker2 | 10.21.32.112 |