Apache Spark 3.1.2

Mit dem Framework Apache Spark lässt sich Datenanalyse in Echtzeit betreiben. Dazu greift Apache Spark mit Hilfe einer SQL-Komponente auf strukturierte Daten zu und arbeitet mit anderen Projekten wie Apache Hadoop YARN, Hive und Mesos zusammen. Das Framework wurde in den Programmiersprachen Scala, Java sowie Python geschrieben und kommt im Hadoop File System beziehungsweise im Network File System zum Einsatz.

Siehe dazu auch:

• Apache Spark 1.0: Framework zur Echtzeitdatenanalyse mit stabilen APIs bei heise Developer