Databricks veröffentlicht KI-Modell-SDK für die Big-Data-Analyseplattform Spark: Generierung von SQL- und FySpark-Sprachdiagrammcode mit einem Klick

Neuigkeiten am 10. Juli: Databricks hat kürzlich das von der Big-Data-Analyseplattform Spark verwendete KI-Modell-SDK veröffentlicht. Wenn Entwickler Code schreiben, können sie Anweisungen auf Englisch geben, und der Compiler konvertiert die englischen Anweisungen in PySpark- oder SQL-Sprachcode, um die Entwicklereffizienz zu verbessern .

▲ Bildquelle Databricks-Website

Es wird berichtet, dass Spark ein Open-Source-Big-Data-Analysetool mit mehr als 1 Milliarde Downloads pro Jahr ist und in 208 Ländern und Regionen auf der ganzen Welt verwendet wird.

▲ Bildquelle Databricks-Website

Databricks sagte, dass Microsofts KI-Code-Assistent GitHubCopilot leistungsstark ist, aber die Schwelle für die Verwendung ist auch relativ hoch, das SDK von Databricks ist relativ universeller und einfacher zu verwenden.

Databricks behauptet, dass sie herausgefunden haben, dass große Sprachmodelle Spark sehr gut verstehen, und die Spark-Community hat in den letzten 10 Jahren eine große Menge an offenem, qualitativ hochwertigem Text für die KI-Lernentwicklung beigesteuert. Das Databricks-Team stützte sich für das Training auch auf eine Reihe von Lerndaten, die von der Spark-Community bereitgestellt wurden, und nutzte LLM, um eine englische Version des SDK zu entwickeln. Entwickler können dieses SDK verwenden, um Befehle direkt auf Englisch auszugeben und entsprechende Ergebnisse zu erhalten, wodurch die Entwicklungseffizienz verbessert wird.

▲ Bildquelle Databricks-Website

IT House stellte fest, dass Databricks auch behauptete, dass sich die englische Version des SDK noch in der frühen Entwicklungsphase befinde, und sie begrüßen mehr Benutzer, die sich an der Verbesserung des SDK beteiligen.

Das obige ist der detaillierte Inhalt vonDatabricks veröffentlicht KI-Modell-SDK für die Big-Data-Analyseplattform Spark: Generierung von SQL- und FySpark-Sprachdiagrammcode mit einem Klick. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!