Giriş

Merhabar. Bu repoda Apache Spark notlarım bulunmaktadır. Ağırlık olarak Scala ile yazmayı düşünüyorum lakin PySpark ile ilgili bir takım notlarda bulunmaktadır.

Python kısmı eskidir. Scala ile devam etmeye karar verdim.

Klasör isimleri ve barındırdıkları

klasör	açıklama
install	Kurulumlar
doc	Okuduğum dökümanlar
code	Belirli işlemler: JSON okuma, yazma gibi

Linkler

• Scala
  • install
    • Jupyter notebook' ta Scala yazma: Başka kaynak
  • doc
    • 🚧 SparkDoc: Interactive Analysis with the Spark Shell
    • SparkDoc: RDD Programming Guide
  • code
    • Read and Write: JSON
    • Read and Write: CSV
• Python
  • install
  • doc
    • DataFrame
    • Broadcast and Accumulator
    • Context and RDD
    • SQL with dataset
  • code
    • JSON: read and write
    • PostgreSQL: read and write
    • CSV: read