Modul ini memberikan kesadaran, bukan penguasaan, atas Apache Spark. Materinya mencakup batas mesin tunggal yang melahirkan komputasi terdistribusi, arsitektur driver, executor, dan evaluasi malas, pengalaman singkat PySpark pada data sampel, serta kejujuran tentang kapan DuckDB dan pandas sudah cukup. Penalaan Spark yang mendalam diarahkan ke jalurnya sendiri.
Kesadaran Spark
Kesadaran Spark: alasan komputasi terdistribusi, arsitekturnya, pengalaman PySpark, dan batas kapan Spark tidak diperlukan.
0/0 selesai
- Mengapa komputasi terdistribusi
Batas mesin tunggal yang memaksa komputasi terdistribusi pada data skala besar.
- Konsep Spark
Arsitektur Spark, yaitu driver, executor, dan evaluasi malas.
- Pengalaman singkat PySpark
Menjalankan PySpark pada data sampel, yakni API DataFrame dan operasi dasarnya.
- Kapan tidak memakai Spark
Kejujuran tentang skala, yaitu kapan DuckDB dan pandas sudah cukup dan Spark justru membebani.