Databricks publie un SDK de modèle d'IA pour la plateforme d'analyse Big Data Spark : générez du code de graphique en langage SQL et FySpark en un seul clic

News le 10 juillet, Databricks a récemment publié le SDK de modèle d'IA utilisé par la plateforme d'analyse Big Data Spark Lorsque les développeurs écrivent du code, ils peuvent donner des instructions en anglais, et le compilateur convertira les instructions en anglais. dans le code PySpark ou SQL Language pour améliorer l'efficacité des développeurs .

▲ Source d'image Site Web Databricks

Il est rapporté que Spark est un outil d'analyse de Big Data open source avec plus d'un milliard de téléchargements par an et est utilisé dans 208 pays et régions du monde.

▲ Source de l'image Site Web Databricks

Databricks a déclaré que l'assistant de code d'IA de Microsoft, GitHubCopilot, est puissant, mais que le seuil d'utilisation est également assez élevé. Le SDK de Databricks est relativement plus universel et plus facile à utiliser.

Databricks affirme avoir constaté que les grands modèles de langage comprennent très bien Spark, et la communauté Spark a contribué à une grande quantité de textes ouverts et de haute qualité pour le développement de l'apprentissage de l'IA au cours des 10 dernières années. L'équipe Databricks s'est également appuyée sur une série de données d'apprentissage fournies par la communauté Spark pour la formation et a utilisé LLM pour développer une version anglaise du SDK. Les développeurs peuvent utiliser ce SDK pour émettre directement des commandes en anglais et obtenir les résultats correspondants, améliorant ainsi l'efficacité du développement.

▲ Source de l'image Site Web Databricks

IT House a découvert que Databricks a également affirmé que la version anglaise du SDK en était encore à ses débuts et qu'ils invitons davantage d'utilisateurs à se joindre à nous pour améliorer le SDK.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!