Apache Spark

Die Cloudera Data Platform One bündelt alle für Datenanalyse und -erkundung erforderlichen Tools als Software-as-a-Service auf Basis der Lakehouse-Architektur.

Mit dem neuen API-Satz ermöglicht Microsofts ML-Bibliothek den Sprachen der .NET-Familie wie C# und F# verteiltes Machine Learning mit Apache Spark.

Die Big Data Tools 1.6, ein Plug-in für Zugriff auf Zeppelin Notebooks, beherrscht nun auch das Monitoring von Apache Flink und bindet den Hive Metastore ein.

Das neue Release der Data-Science-Software SystemDS führt ein Federated Backend für Mehrmandantenfähigkeit ein und vollzieht das Update auf Java 11 und Spark 3.

Der in die Databricks-Plattform integrierte Dienst AutoML soll Data Scientists helfen, ML-Modelle schneller produktionsreif zu entwickeln.

Google und OpenMined machen die Vorzüge des differenzierten Datenschutzes auch der Python Developer Community als Open Source zugänglich.

Über die PySpark-API spricht man Spark aus eigenen Python-Programmen an, um so skalierbare Big-Data- und Machine-Learning-Analysen zu entwickeln.

Daten sprechen Bände – holen Sie mehr aus Ihren Unternehmensdaten hraus mit Python und Apache Spark. 10 % Frühbucherrabatt bis 6. Oktober.

JetBrains hat die erste Hauptversion der Kotlin-API für Spark fertiggestellt. Sie gilt als Feature-komplett und soll kompatibel sein zu den Kern-APIs von Spark.

Data Scientists lernen in diesem Kurs, skalierbare Big-Data- und ML-Analysen in Python auf Basis von Apache Spark zu entwickeln – Frühbucherrabatt bis 7.7.

Die Erweiterung zum Zugriff auf Zeppelin Notebooks und für das Monitoring von Spark- und Hadoop-Anwendungen ist nun in Version 1.0 verfügbar.

Als Serverless Container Engine soll Wave die Infrastrukturverwaltung für containerisierte Spark-Anwendungen auf Kubernetes vereinfachen.

Unter dem Schlagwort Project Zen soll Spark den Einsatz von PySpark vereinfachen, um Python für die Analytics-Engine zu nutzen.

Üppig ausgestattet mit Risikokapital bereitet sich das Unternehmen hinter dem Big-Data-Framework Apache Spark auf einen Börsengang vor.

Microsoft stellt die erste Hauptversion des Open-Source-Pakets zur Verfügung und macht Spark-Anwendern die UDFs von .NET zugänglich.

Die Tools für ETL-Prozesse, Data-Pipeline-Orchestrierung, Automatisierung und Monitoring sind als Spark-Service in die Cloudera Data Platform integriert.

Das Open-Source-Projekt will eine Kompatibilitätsschicht zwischen der Programmiersprache Kotlin und dem Big-Data-Framework Apache Spark bieten.

Lernen Sie, wie Sie Apache Spark für Big-Data-Analysen aus Python-Programmen heraus nutzen. Bei Buchung bis 21.8. winken 10% Frühbucherabatt.

Das Major-Release der Big-Data-Engine hat viele Verbesserungen, aber auch neue Ansätze im Gepäck, die höhere Performance und mehr Kompatibilität versprechen.

Nutzer der IDEs erhalten über das Plug-in direkten Zugriff auf Zeppelin Notebooks, Spark-Anwendungen sowie Dateien auf S3-Speicherinstanzen