Tutorial Install Hadoop - Jurusan Informatikacs.unsyiah.ac.id/~sbahri/Saiful_bahri_kompar.docx ·...

11
2013 Saiful Bahri 11081070100 63 Informatika Unsyiahh Tutorial Install Hadoop

Transcript of Tutorial Install Hadoop - Jurusan Informatikacs.unsyiah.ac.id/~sbahri/Saiful_bahri_kompar.docx ·...

Saiful Bahri

1108107010063

Informatika

2013

Tutorial Install Hadoop

Mengenal Hadoop

Hadoop Merupakan Distributed File atau bisa diartikan system file yang terdistribusi Hadoop ,Hadoop juga merupakan suatu proyek open source milik Apache.Apache mengembangkan HDFS berdasarkan konsep dari google File System , Oleh karena itulah HDFS sangat mirip Dengan google file system .Baik Ditinjau dari segi fisiknya maupun logika dan cara kerjanya .

Karena hadup merupakan file distribusi ,file distribusi tersebut merupakan system yang menyimpan data tidak dalam satu hard drive (HDD) atau media penyimpan lainnya , akan tetapi hal lainnya data tersebut di pecah-pecah dan disimpan tersebar dalam suatu cluster yang terdiri atas beberapa computer ,bisa dua atau bahkan ribuan computer .

Mengistall Hadoop Pada Linux Ubuntu (Single-Node Cluster )

Persiapkan Virtual Box . Dan install . Install Ubuntu 12.10 di virtual box (Bisa yang versi lain) Persiapkan Hadoop 2.2.0 ( Bisa juga dengan versi lain)

Persiapan Penginstalan

Install Python dengan Perintah

Selanjutnya dengan menggunakan perintah

Dan selanjutnya perintah “$ sudo apt-get update” Lalu install JDK pada Ubuntu dengan perintah “$ sudo apt-get install

openjdk-6-jdk” Kalau sudah bisa dicek dengan perintah “$ java –version” Buat Hadoop user baru dengan shintax”$ sudo addgroup hadoop “ dan “$

sudo adduser –ingroup hadoop hduser “. Perintah tersebut akan membuat hduser dan folder hadoop dalam system.

Install SSH pada Ubuntu dengan sintax “$ sudo apt-get install ssh”, tunggu sampai selesai.

Konfigurasi SSH

Langkah pertama yaitu mengenerate SSH key untuk hduser. Ketik “$ su – hduser”

Dilanjutkan dengan

Selanjutnya harus mengaktifkan SSH pada local Machine yang telah anda buat tadi

Kemudian konekkan SSH dengan localhost

Selanjtunya disable IPv6 ,EXIT dari hduser,dan masuk sebagai root.

Pada bagian akhir teks editor ,ketikkan

Selanjutnya harus reboot Ubuntu setelah konfigurasi ipv6 tersebut .dan setelah itu ketikan perintah untuk melihat apakah sudah terdisable atau tidak.

Jika muncul angka 1 , maka pen-disable-an IPv6 berhasil.

Install HADOOP Masuk kedalam folder tempat hadoop berada

Ketikkan perintah

Langkah selanjutnya kita update Update $HOME/.bashrcDengan Perintah “$ nano $home/.bashrc” lalu akan muncul teks editor ,pada baris terakhir tambahkan teks seperti ini

Sambungan

Selanjutnya kita konfigurasi file hadoop-env.sh

Cari baris

Dan edit menjadi

Buat suatu direktori dan set chmod nya

Cari dan buka core-site.xml ,pada bagian diantara <configurasi></configuration>isikan teks berikut ini .

Setelah itu cari dan buka file mapred-site.xml,(jika ditemukan “mapred-site.xml.template “ maka hapus saja .template ..lalu sisipkan text berikut diantara <configuration></configuration>.

Cari file hdfs-site.xml, edit juga pada configurationnya

Formatting HDFS FILEsistem Via NameNodegIni berguna untuk mengimplementasi filesistem local cluster teratas,dengan cara

Starting Single-node-Cluster Start hadoop dengan perintah :

Silahkan cek browser pada urlnya ketikkan “localhost:50030” jika berhasil akan muncul halamannya

Kalau sudah selesai ,hentikan aktivitas hadoop dengan perintah

..