Big Data

Big Data merujuk pada sekumpulan data digital dalam jumlah yang sangat raksasa, mengalir masuk secara instan, serta memiliki format yang beraneka ragam. Karena ukurannya yang terlalu besar, Big Data tidak dapat diolah menggunakan komputer biasa atau database tradisional, melainkan menuntut teknologi penyimpanan khusus.

1. Pilar Karakteristik Utama Big Data (5V)

Tantangan serta karakteristik unik big data diringkas ke dalam formula pilar 5V:

• Volume: Ukuran kapasitas data raksasa (misalnya riwayat klik miliaran pengguna).
• Velocity: Kecepatan aliran data masuk secara real-time setiap detik.
• Variety: Keberagaman format data mulai dari tabel terstruktur, teks bebas, gambar, hingga rekaman suara.

2. Pembagian Tugas Secara Paralel (Master-Worker Cluster)

Untuk mengolah data raksasa tersebut, tugas komputasi dibagi rata ke sekelompok server (Cluster) secara paralel:

• Master Node: Koordinator utama yang membagi file data besar menjadi potongan kecil dan menyebarkannya.
• Worker Node: Server-server pekerja yang memproses potongan data tersebut secara bersamaan.