Pengolahan data sensor IOT dengan Apache Spark menggunakan metode Batch Processing

Abstract

Penelitian ini mengeksplorasi pengolahan data sensor IoT menggunakan Apache Spark melalui batch processing. Dalam era IoT, di mana data sensor dari berbagai sumber online melimpah, pengolahan data sangat strategis untuk meraih wawasan berharga. Pemilihan Apache Spark sebagai alat pengolahan didasarkan pada kemampuannya mengatasi volume data besar dengan cepat dan efisien. Melalui metode batch processing, data sensor dikumpulkan pada interval tertentu untuk analisis serentak, mengungkap pola, tren, dan anomali. Hasil analisis ini mendukung pengambilan keputusan yang lebih baik terkait sistem IoT. Penelitian ini melibatkan langkah-langkah penting, mulai dari pengumpulan, pembersihan, transformasi, hingga analisis data sensor. Evaluasi kinerja Apache Spark dalam batch processing mempertimbangkan waktu pemrosesan dan penggunaan sumber daya. Harapannya, penelitian ini memberikan kontribusi signifikan untuk pengembangan sistem IoT yang lebih efisien dan cerdas, serta mendukung pengambilan keputusan berbasis data sensor.