Apache Spark

Snowflake bereitet autonomere Datenpipelines und KI-Agenten vor
Snowflake hat mehrere Aktualisierungen für das Datenmanagement vorgestellt, die KI-Agenten und -Anwendungen unterstützen sollen. Die Ankündigungen reichen von…

Databricks macht Real-Time Mode für Spark Declarative Pipelines allgemein verfügbar
Databricks hat den Real-Time Mode (RTM) für Spark Declarative Pipelines (SDP) allgemein verfügbar gemacht. Damit erreicht das Framework, das laut Unternehmen der…

Databricks-Benchmark: Deklarative Spark-Pipelines senken die Rechenzeit von Agenten um das 34-Fache
Databricks sieht in Spark Declarative Pipelines (SDP) die bessere Wahl für KI-Agenten, die produktive Datenpipelines bauen. Im eigenen Benchmark benötigten deklarative…

NVIDIA zeigt, wie KI-Agenten Spark-UDFs für GPU-Beschleunigung umschreiben
NVIDIA hat eine Anleitung veröffentlicht, wie sich Apache-Spark-UDFs (User-Defined Functions) mithilfe von Coding-Agenten in GPU-beschleunigte Varianten umschreiben…