Hadoop本地模式安裝如何實現？
本節向大家介紹一下Hadoop本地安裝是如何實現的，相信通過本文的介紹大家能夠很快掌握Hadoop本地安裝的方法，讓我們一起來看一下如何進行Hadoop本地安裝。為了便于大家理解，在沒有介紹之前先看一下Hadoop的概念。
Hadoop本地模式安裝
Hadoop概念
Hadoop是一個分布式系統基礎架構，由Apache基金會開發。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力高速運算和存儲。簡單地說來，Hadoop是一個可以更容易開發和運行處理大規模數據的軟件平臺。
Hadoop實現了一個分布式文件系統（HadoopDistributedFileSystem），簡稱HDFS。HDFS有著高容錯性（fault-tolerent）的特點，并且設計用來部署在低廉的（low-cost）硬件上。而且它提供高傳輸率（highthroughput）來訪問應用程序的數據，適合那些有著超大數據集（largedataset）的應用程序。HDFS放寬了（relax）POSIX的要求（requirements）這樣可以流的形式訪問（streamingaccess）文件系統中的數據。當前最新版本是hadoop0.20.1。下面就hadoop0.20.1為藍本，介紹在UbuntuLinux9.10下hadoop本地安裝的方法。
支持的平臺：
Linux，可作為開發和產品部署的平臺；
Windows，可作為開發平臺。
事先需要的軟件：
1.JavaTM1.6.x，必須安裝，建議選擇Sun公司發行的Java版本；
2.ssh必須安裝，并保證sshd運行，hadoop將以ssh進行通訊；
3.如果是windows，則需要裝Cygwin，用以支持shell命令。
Hadoop安裝可用的模式：
1.本地模式；
2.偽分布模式；
3.全分布模式。
本地模式安裝步驟：
1.將hadoop安裝包解壓縮到某目錄下；
2.修改conf/hadoop-env.sh文件，exportJAVA_HOME=那行設置正確的JAVA_HOME位置，當然如果事先在操作系統已經set完JAVA_HOME，可以忽略此步驟；
Hadoop本地模式安裝完了，就這么簡單！
測試一下運行效果：
$mkdirinput
$cpconf/*.xmlinput
$bin/hadoopjarhadoop-*-examples.jargrepinputoutput'dfs[a-z.]+'
$catoutput/*
這個示例程序是hadoop自帶的，用于把conf下的xml文件拷貝到input目錄下，并且找到并顯示所有與最后一個參數的正則表達式相匹配的行，output是輸出文件夾。本節關于Hadoop本地安裝介紹到這里，希望你有所收獲。
【編輯推薦】
