Tag: apache
-
DATAFRAME DALAM SPARK
Tantangan Menulis Hari ke-127 Oleh: Bernardus Ari Kuncoro Dalam Spark, struktur data yang utama disebut sebagai RDD atau Resilient Distributed Dataset. RDD ini merupakan obyek yang paling bawah (low level) sedemikian sehingga Spark dapat bekerja memecah-mecahkan data ke setiap node dalam sebuah kluster. Namun, pengerjaan langsung dengan RDD ini termasuk ribet alias sulit, sehingga Spark DataFrame disarankan untuk…
-
APA PERLU PAKAI SPARK?
Tantangan Menulis Hari ke-126 Oleh: Bernardus Ari Kuncoro Tulisan ini merupakan lanjutan dari tulisan sebelumnya terkait “APA ITU SPARK?” Well, semakin besar kekuatan komputasi yang digunakan untuk mengolah data Anda, tentu semakin kompleks pembagian tugasnya. Bayangkan Anda memiliki tugas membuat video. Tugas video yang pertama hanya membutuhkan satu pemeran. Sementara video yang kedua butuh melibatkan…
-
APA ITU SPARK?
Tantangan Menulis Hari ke-125 Oleh: Bernardus Ari Kuncoro BAYANGKAN ANDA DIMINTA ATASAN UNTUK BEKERJA DENGAN DATA YANG SANGAT BESAR. Seberapa besar? Misal berukuran 2TB. Sementara laptop Anda tidak bisa menampungnya. Apa yang akan Anda lakukan? Beli HDD eksternal? Pinjam laptop temen Anda? Secara konsep, benar bahwa solusinya adalah dengan memasukkan dataset tersebut ke dalam sebuah…
-
MENGENAL APACHE CASSANDRA
Tantangan Menulis Hari ke-156 Oleh: Bernardus Ari Kuncoro Ada pepatah “Tak kenal maka tak sayang”. Hal ini berlaku juga ketika Anda mengenal suatu sistem database. Kali ini saya ingin memperkenalkan Anda dengan Apache Cassandra. Suatu sistem database yang ditujukan untuk kemudahan proses scalability dan memiliki high availability, tanpa mengesampingkan performa. Tahukah Anda, bahwa Apache Cassandra…
