Spark安裝
重要聲明:馬克-to-win @ 馬克java社區(qū): 既然我們的名字叫最最最入門,這個講義的特點就在于成本最低的,讓你最快速的,最容易的入門。大數(shù)據(jù)的最大的難點在于入門入不了,從而最終放棄。俗話說師傅領進門,修行在個人。只要入了門了,后面的事都好辦。當然,既然側重點在于如何入門,內(nèi)容選的就不是很多。那些已經(jīng)入門的,或者想學到精通級別的同學,請千萬不要選我這套講義,選課前,務必注意本章的學習目標和內(nèi)容。想學更多,注意后邊的課程。
Windows32或64位下載安裝配置Spark
1)下載地址:http://spark.apache.org/downloads.html
馬克- to-win:馬克 java社區(qū):防盜版實名手機尾號: 73203。
馬克-to-win @ 馬克java社區(qū):選擇需要下載的Spark版本(購買完整教程)
2)配置:
馬克-to-win @ 馬克java社區(qū):解壓(購買完整教程)
3)啟動測試:
a)啟動Hadoop
b)在cmd窗口運行spark-shell,出現(xiàn)下圖代表OK。
c)因為我的hadoop 的根目錄下有一個README.txt文件,
所以測試一下word count,在命令行輸入sc.textFile("hdfs://localhost:9000/README.txt").count()查看執(zhí)行結果,出現(xiàn)如下圖代表計算word count成功。
4)訪問http://192.168.1.104:4040/jobs/