BERITA PROGRAMMING Tutorial Install dan Konfigurasi Apache Hadoop di Windows 10

Tutorial Install dan Konfigurasi Apache Hadoop di Windows 10

Oleh Ahmad Bustanul Aziz | Rabu, 19 Mei 2021

Tutorial Install dan Konfigurasi Apache Hadoop di Windows 10

Hadoop adalah framework atau platform open source berbasis Java yang berada di bawah lisensi Apache dan digunakan untuk mendukung aplikasi yang berjalan pada big data.

Yuk, ikuti program inovatif MAGANG ONLINE untuk berbagai bidang seperti animasi, coding, 3D, illustrasi, musik dan bisnis hanya di GAMELAB.ID!

Aktivitas di kantor membosankan?
Karyawan engangement kurang?
GAMIFIKASI-IN aja!

Daftar Isi Artikel

Tentang Hadoop

Hadoop adalah framework atau platform open source berbasis Java yang berada di bawah lisensi Apache dan digunakan untuk mendukung aplikasi yang berjalan pada big data.

Prasyarat Instalasi Hadoop

Install Java Versi 8

Prasyarat sebelum melakukan instalasi hadoop pada windows 10 adalah melakukan instalasi Java. Semua versi hadoop hanya support pada Java versi 8. Berikut langkah-langkahnya:

1. Masuk ke website oracle berikut

https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html

2. Download Java Development Kit 8 (JDK 8) windows x64

1) Klik file jdk .exe untuk windows x64

Halaman Download Java

2) Checklist License Agreement for Oracle Java SE, kemudian klik download. Nanti akan diarahkan ke halaman login.

Pop Up License Agreement for Oracle Java SE

3) Masuk ke akun oracle Anda, file akan terunduh secara otomatis. Apabila belum mempunyai akun, maka klik Create Account untuk membuat akun. 

Halaman Login Oracle

3. Instalasi Java

1) Buka file jdk .exe yang telah download, kemudian ikuti proses instalasi sampai selesai.

Settings Environtment Variables Java

2) Lakukan Settings Environment Variables Java. Pertama, buka Control PanelSystem and SecuritySystemAdvanced System Settings. Kemudian akan muncul dialog box System Properties, lalu klik Environment Variables.

Settings Environtment Variables Java

3) Atur Home Java. Pada User variables, klik New kemudian isi Variable name dengan JAWA_HOME dan Variable value dengan direktori jdk\bin Java. Kemudian klik OK.

Set Home Java

4) Atur path Java. Pada System variables, klik Path. Kemudian klik New dan isi dengan direktori jdk\bin. Lalu klik OK pada Edit environment variable, Environment Variables dan System Properties.

Set Path Java

5) Buka cmd, cek versi java dengan perintah java –version. Apabila muncul versi java yang diinstall, maka proses instalasi berhasil.

Mengecek Versi Java Lewat CMD

Baca Juga : Big Data: Memahami Konsep dan Manfaatnya di Berbagai Sektor

Proses Instalasi Hadoop

1. Kita akan menggunakan hadoop versi 2.9.2 pada percobaan kali ini. Klik link berikut:

https://hadoop.apache.org/release/2.9.2.html

2. Klik download tar.gz, yang artinya Kita download hadoop versi 2.9.2 yang memiliki jenis file tar.gz.

Halaman Download Hadoop

3. Copy file hadoop ke drive C, kemudian ekstrak file hadoop tersebut.

Proses Ekstrak File Hadoop

4. Ketika selesai dan menemukan peringatan seperti dibawah ini, maka klik close.

Peringatan yang Muncul Setelah Proses Ekstrak

5. Ganti nama folder hadoop-2.9.2 menjadi hadoop saja

6. Kemudian Kita akan melakukan konfigurasi terhadap 5 file hadoop. Buka folder hadoop → etc → hadoop. Kemudian buka file core-site.xml, mapred-site.xml (note: dibeberapa versi hadoop nama filenya adalah mapred-site.xml.template, maka dari itu ubah dulu file tersebut menjadi mapred-site.xml saja), yarn-site.xml, hdfs-site.xml, dan hadoop-env.cmd di text editor. 

7. Tambahkan code berikut pada file core-site.xml

Konfigurasi File core-site.xml

8. Tambahkan code berikut pada file mapred-site.xml

Konfigurasi File mapred-site.xml

9. Tambahkan code berikut pada file yarn-site.xml

Konfigurasi File yarn-site.xml

10. Pada direktori hadoop buatlah folder baru dengan nama data, didalam folder tersebut buat 2 folder baru dengan nama datanode dan namenode.

Folder Datanode dan Namenode Berada Didalam Folder Data

11. Tambahkan code berikut pada file hdfs-site.xml. Untuk tag value disesuaikan dengan direktori dimana folder namenode dan datanode dibuat.

Konfigurasi File hdfs-site.xml

12. Pada file hadoop-env.cmd, sesuaikan direktori JAVA_HOME dengan direktori java jdk.

Konfigurasi File hadoop-env.cmd

Penulisan direktori JAVA_HOME sebenarnya tidak boleh terdapat folder yang mengandung spasi, namun apabila ingin tetap terdapat folder dengan spasi, maka ditambahkan “….” agar tidak terjadi error.

13.  Setelah melakukan konfigurasi, sekarang Kita akan mengatur Environment Variables pada Hadoop. Buka Control PanelSystem and Security → System  Advanced System Settings. Kemudian akan muncul dialog box System Properties, lalu klik Environment Variables.

14. Atur Home Hadoop. Pada System variables, klik New kemudian isi Variable name dengan HADOOP_HOME dan variable value dengan direktori hadoop\bin. Kemudian klik OK.

Set Home Hadoop

15. Atur Path Hadoop. Pada System variables, klik Path. Kemudian klik New dan isi dengan direktori hadoop\bin dan hadoop\sbin. Lalu klik OK pada Edit environment variable, Environment Variables dan System Properties.

Set Path Hadoop

16. Agar Hadoop dapat dioperasikan pada OS Windows, diperlukan patch file Hadoop yang spesifik untuk Windows. File tersebut dapat diperoleh melalui link berikut

https://drive.google.com/file/d/1AMqV4F5ybPF4ab4CeK8B3AsjdGtQCdvy/view

17. Ekstrak file tersebut, kemudian ganti folder bin yang ada di folder hadoop dengan folder bin yang telah diekstrak. 

Isi Folder Bin Hadoop yang Telah Diganti

18. Buka CMD. Kemudian ketikkan perintah hdfs namenode –format.

Perintah Format Data Hadoop

19. Masuk ke folder hadoop\sbin kemudian ketikkan perintah start-all.cmd.

 Namenode, Datanode, Resource Manager, dan Nodemanager

20. Apabila kedua perintah tersebut dapat dijalankan, maka proses instalasi hadoop di Windows 10 berhasil.

 

Referensi:

Wijaya. 2019. “Cara Sederhana Install Hadoop 2 mode Standalone pada Windows 7 dan Windows 10”, https://www.teknologi-bigdata.com/2019/01/install-hadoop-2-standalone-windows.html, diakses pada 28 April 2021 pukul 19.00.

Geetansh044. 2021. “How to Install Single Node Cluster Hadoop on Windows?”, https://www.geeksforgeeks.org/how-to-install-single-node-cluster-hadoop-on-windows/, diakses pada 29 April 2021 pukul 13.00.

Halim, Stevani. 2018. “Sedikit Tentang Hadoop”, https://medium.com/@stevanihalim/sedikit-tentang-hadoop-18d6ade32ae7, diakses pada 29 April 2021 pukul 15.00.


Ahmad Bustanul Aziz

Ahmad Bustanul Aziz

Rabu, 19 Mei 2021

ARTIKEL TERKAIT

Magang lebih mudah dan bisa dilakukan dari mana saja dengan Program Magang Online Gamelab. Magang Bersertifikat, plus Pelatihan!

DAFTAR MAGANG

ARTIKEL POPULER

KATEGORI