免安裝、免設定的 Hadoop 開發環境 - cloudera 的 QuickStart VM

cloudera 的 QuickStart VM，為一種免安裝、免設定 Linux 及 Hadoop，已幫你建好 CDH 5.x、Hadoop、Eclipse 的一個虛擬機環境。下載後解壓縮，可直接以 VirtualBox、VMWare、Docker、KVM 任一虛擬機，開啟 Hadoop 2.x 執行環境，並可用內建本地模式的 Eclipse 開發工具，開發、執行 Hadoop 程式碼。

下載點 :
http://www.cloudera.com/downloads.html?productID=F6m0278Rvo

下載點 (同上) :
http://www.cloudera.com/downloads/quickstart_vms/5-5.html

虛擬機至少 4 GB 記憶體 (内存)，部分功能要 8 GB 記憶體。

若為 VirtualBox，選擇「匯入應用裝置」，即可匯入下載的 .ovf 檔。

此 Hadoop 2.6.0 / CDH 5.5.0 環境，是以「偽分布模式 (Pseudo-distributed Cluster)」在運作，亦即用多個 Java 的 process，來模擬一個真實 cluster 環境中的運作。


圖 1　已設定好的 Hadoop 2.6.0 / CDH 5.5.0 / Eclipse 環境

-------------------------------------------------------------------------------------------------------------------------

資料來源:

深入理解 Hadoop (原書第2版), Pro Apache Hadoop, 簡體中譯本
http://www.amazon.cn/%E5%9B%BE%E4%B9%A6/dp/B018LW7H6I
http://m.sanmin.com.tw/product/index/005478219
ISBN：9787111515654

时间： 2024-12-14 04:00:40

免安裝、免設定的 Hadoop 開發環境 - cloudera 的 QuickStart VM的相关文章

想用Java開發GAE, 如何建構開發環境, Part1: 安裝及設定Google Plugin

在雲端的時代若想要用最小的成本, 運用雲端來兼具快速佈署.自動平衡負載.高可用性, 高可塑性, Google App Engine (GAE)似乎是一個符合經濟及效益的雲端PaaS平台. 站在Google巨人的肩膀上, 架設雲端的諸多系統上的問題似乎都可以不用煩惱, 營運及開發人員只要專心把服務及產品做好就可以水到渠成. 由於這個例子以Eclipse Java EE來開發 GAE上的應用程式, 重點將擺在環境的安裝與設定, 並以一個事先寫好的Google Data的測試程式來做最終的結果驗證.

安裝 Rails 開發環境

安裝 Rails 開發環境 Give someone a program, you frustrate them for a day; teach them how to program, you frustrate them for a lifetime. - David Leinweber https://ihower.tw/rails4/installation.html 在這一章中,我們將介紹如何安裝Ruby on Rails的開發環境.開發Rails的環境需要: Ruby 1.9.3以

設定MacOS 終端機環境 (Homebrew/zsh/oh-my-zsh/iTerm2)

安裝Homebrew 1 ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)" 更新Homebrew 1 brew update 安裝wget 1 brew install wget 安裝zsh 1 brew install zsh 更新zsh 1 brew upgrade zsh 修改預設shell為zsh 1 $ chsh -s /usr/local/bin

Windows下安裝並設置Redis

Windows下安裝並設置Redis Redis對於Linux是官方支持的,安裝和使用沒有什麼好說的,普通使用按照官方指導,5分鐘以內就能搞定.詳情請參考: http://redis.io/download 但有時候又想在windows下折騰下Redis,可以從redis下載頁面看到如下提示(在頁面中搜索 "windows"): Win64 Unofficial The Redis project does not directly support Windows, however t

MAC安裝《Genymotion Android模擬器》大玩Android APP (神魔之塔)

链接地址:http://www.minwt.com/mac/10083.html/comment-page-2 MAC» 智慧型裝罝» Android | 2014/02/12 Android是一個開放的平台,因此先前也分享了幾個Android的模擬器,但當初梅干使用Android模擬器,最主要的功能就是用來測試網頁,看網頁在Android手機上是否能正常運作,雖然說這些Android模擬器,也可透過Google Player安裝Android APP,在電腦中就可玩Android APP,但由

Delphi APP 開發入門（二）Android/iOS設定，Hello World

Delphi APP 開發入門(二)Android/iOS設定,Hello World 分享: Share on facebookShare on twitterShare on google_plusone_share 閲讀次數:9047 發表時間:2014/05/12 tags: 行動開發 教學 App Delphi XE6 Android iOS 上一期 讓大家認識Delphi以及安裝後,今天要教大家設定Delphi在Android與iOS的開發環境,並且教大家透過寫出第一個Hello W

在VPS上安裝BT軟體Transmission

在VPS上安裝BT軟體Transmission 作者: 窮苦人家的小孩 | 2009-12-04 55 Comments VPS 還能怎玩?! 裝Proxy,裝VPN,這還不夠,我還用來掛種子夠狠吧  反正頻寬閒也是閒者,不過安裝前最好事先問問主機商是否允許,合法的文件大多都是OK的.偶用YUM裝了幾個軟體總覺都怪怪的,畢竟不是該軟體最新的版本,再加上CentOS是一套強調安全的系統,當然對P2P這玩意不會太支援,我裝過了純網頁介面的Torrentflux,很多人推薦的rTorrent,但是最後

在 Windows 7 環境安裝 Python 2.6.6

目前 Python 的最穩定的版本是 2.7.3 及 3.2.3,因為 2.x 與 3.x 語法並不是完全相容,在各版本之間也有些差異,所以建議還是各自安裝需要的版本… 艾小克工作環境是使用 2.6 版本,目前在在官方網站所提供 Windows Installer 只到 2.6.6,而在其他平台則有提供至 2.6.8 原始碼或套件可供編譯安裝… 如果想要知道 2.x 與 3.x 之間的主要差異,可以參考「Should I use Python 2 or Python 3 for my devel

【Python】Windows, Linux/UNIX, Mac OS X 下安裝 Python

下載地址:https://www.python.org/downloads/ 下載對應系統.對應位數的版本即可. [Windows] 一般選擇"Windows x86-64 executable installer",即 64 位兼容 32 位的可執行安裝程序. 打開安裝程序,先勾選"Add Python X.X to PATH",代表安裝時將 Python 對應版本目錄添加到 PATH 系統環境變量中,再選擇"Customize installation