Hadoop-MapReduce pada YARN framework

Abstract

Big data, sebagai kumpulan data berskala besar, memiliki karakteristik yang bervariasi, pertumbuhan yang sangat cepat, dan kompleksitas tinggi. Kompleksitas ini terutama terkait dengan data yang tidak terstruktur, memerlukan pemrosesan khusus melalui infrastruktur yang dapat mengelola volume data yang besar. Dalam konteks ini, tugas ini mengulas tantangan utama yang dihadapi oleh big data dan menyajikan kerangka kerja Apache Hadoop pada tingkat pelaksanaan pekerjaan MapReduce yang didasarkan pada YARN (Yet Another Resource Negotiator). Kami mengeksplorasi penerapan konkret dari kerangka kerja ini melalui studi kasus aplikasi wordcount menggunakan bahasa pemrograman Java.