Les bases de données ouvrent la voie rapide à l'IA, Alibaba Cloud lance la nouvelle technologie open source PilotScope

Source | Technologie Xinyan

Article | Jia Ningyu

Le 20 décembre, VLDB2024, la plus grande conférence internationale sur les bases de données, a annoncé un nouveau lot d'articles. La nouvelle technologie PilotScope d'Alibaba Cloud a été sélectionnée avec succès. Cette technologie de plate-forme peut réaliser un « déploiement en un clic » d'algorithmes d'IA dans les bases de données, réduisant considérablement l'application. des algorithmes d’IA dans les bases de données, ouvrant ainsi une nouvelle voie à l’intelligence des bases de données. Le 20 décembre, la conférence internationale sur les bases de données VLDB2024 a annoncé un nouveau lot d'articles, et la nouvelle technologie PilotScope d'Alibaba Cloud a réussi à figurer sur la liste. La technologie de la plateforme peut réaliser un « déploiement en un clic » d'algorithmes d'IA dans les bases de données, ce qui réduit considérablement. le seuil d'application des algorithmes d'IA dans les bases de données et ouvrant une toute nouvelle voie pour l'intelligence des bases de données.

Alibaba Cloud a annoncé qu'il ouvrirait gratuitement toutes les technologies PilotScope le même jour

Pourquoi est-il difficile de rendre une base de données intelligente ?

La base de données est une technologie logicielle de base vitale pour l’économie nationale et la vie des gens. La mise à jour continue de la technologie des bases de données a un impact important sur tous les domaines de la vie à l'ère numérique. L'un des domaines frontières est l'intelligence des bases de données (AI4DB, c'est-à-dire l'intelligence des bases de données)

.

Le système de base de données actuel est très complexe et nécessite des exigences de stabilité très élevées. Même le simple fait de faire correspondre et de déboguer un algorithme d'IA avec une base de données nécessite que les ingénieurs des deux parties travaillent en étroite collaboration pendant des semaines, voire des mois, ce qui est inefficace et donne de mauvais résultats

Une situation plus courante est que les ingénieurs en IA ne comprennent pas les détails des bases de données, les développeurs de bases de données ne comprennent pas l'IA et les deux domaines ne comprennent même pas les langages de programmation (le développement de l'IA utilise principalement Python, les bases de données utilisent principalement C/ Java), ce qui peut facilement conduire à une séparation.

De manière générale, les entreprises du secteur choisissent généralement d'intégrer certains algorithmes d'IA directement dans la base de données pour remplacer certains modules fonctionnels de la base de données, tels que les modules d'optimisation intelligents des requêtes. Cependant, cette approche personnalisée entraîne des coûts de développement, de maintenance et de mise à niveau très élevés. Chaque fois que l'algorithme d'IA est mis à niveau et remplacé, le processus de développement doit être refait. Dans le même temps, modifier la base de code de la base de données entraînera également des risques supplémentaires

Pour cette raison, malgré le développement rapide de l'intelligence artificielle, l'application pratique des résultats associés dans le domaine des bases de données n'est toujours pas populaire

Y a-t-il un technologie de plateforme universelle ? , les algorithmes d’intelligence artificielle peuvent-ils être appliqués plus efficacement aux bases de données ?

C'est devenu le point de départ de la réflexion de l'équipe du projet Alibaba PilotScope

Le chef du projet PilotScope, Zhu Rong, a déclaré : « AI4DB, AI et DB ont des gens qui travaillent aux deux extrémités, mais le pont au niveau de cette connexion n'a jamais été bien fait. Nous voulons Il est nécessaire de construire un pont public entre les algorithmes d'IA et les bases de données pour rendre la communication entre les deux parties plus fluide. "

Innovation cross-tech de 0 à 1

Zhu Rong a décrit PilotScope comme le "super administrateur" de la base de données. IA Avec la plate-forme PilotScope, les ingénieurs en IA doivent uniquement se concentrer sur la conception d'algorithmes d'IA généraux pour mettre en œuvre le déploiement et l'application de différentes bases de données ; les utilisateurs de bases de données peuvent utiliser l'IA de manière aussi pratique et efficace que l'appel d'API

Cette idée va de la conception à la mise en œuvre, ce qui a duré environ 2 ans. Zhu Rong a déclaré : « Cela implique l'intersection des algorithmes et des systèmes, l'intersection de l'IA et des bases de données, l'intersection de la recherche et du développement et l'intersection du monde universitaire et de l'industrie. C'est une véritable intersection technologique

Selon son introduction. , l'équipe du projet a parcouru de nombreuses étapes. Après le peaufinage, une toute nouvelle plate-forme système middleware a finalement été développée. En résumant et en généralisant les définitions de modules et d'interfaces au niveau de la base de données et du système d'IA, l'algorithme d'IA peut être « déployé en un clic » dans. la base de données en quelques heures, voire quelques minutes. Il s'agit du PilotScope actuel

Le contenu réécrit est le suivant : Annotation du diagramme d'architecture Alibaba Cloud PilotScope

PilotScope fournit plus de 10 algorithmes d'IA pour les tâches de base de données courantes telles que le réglage des paramètres, l'indexation. recommandation, estimation de cardinalité et optimisation des requêtes. Et adapté avec succès à deux bases de données open source grand public telles que PostgreSQL et Spark

Selon des données expérimentales, l'utilisation de PilotScope pour intégrer des algorithmes d'IA dans la base de données peut accélérer de 1 à des tâches telles que l'optimisation des requêtes. 1% par rapport à la méthode traditionnelle "implant dur". Varie de 2 fois. De plus, le coût supplémentaire de déploiement causé par PilotScope lui-même est fondamentalement négligeable et les performances sont excellentes

Description de l'image : rendu PilotScope

PilotScope effectue une "micro-intrusion" sur la base de données et introduit une détection intelligente, une restauration, une isolation et d'autres mécanismes. Pour réduire le risque d'hallucinations de l'IA et réaliser une amélioration intelligente tout en garantissant la stabilité de la base de données

Zhu Rong a déclaré que dans le passé, les ingénieurs en intelligence artificielle et les développeurs de bases de données devaient collaborer et affiner en permanence, et cela pouvait prendre des semaines, voire des mois, pour garantir la stabilité. "Avec notre PilotScope, la mise en ligne pour les tests ne prend que quelques heures, voire des dizaines de minutes. Cette innovation technologique zéro à un améliore considérablement l'efficacité du développement.

L'Open source pilote le processus d'industrialisation d'AI4DB

PilotScope. " les résultats des articles ont été inclus dans VLDB. La revue VLDB estime que la conception pionnière du système PilotScope basée sur des scénarios d'application ouvrira une nouvelle direction en matière d'intelligence des bases de données.

Selon notre compréhension, VLDB est l'une des trois plus grandes conférences internationales sur les bases de données et ne comprend que des articles qui ont un impact important sur le monde universitaire et la pratique industrielle obtiennent chaque année de nouveaux résultats. Il s'agit d'un indicateur faisant autorité de la technologie des bases de données. La 50e conférence VLDB devrait se tenir à Guangzhou, en Chine, en août 2024.

Remarque : la principale conférence sur les bases de données VLDB2024

Zhu Rong a déclaré que les technologies liées à PilotScope sont déjà utilisées sur GitHub et Modelscope Gratuit et open source dans la communauté. L'équipe espère intégrer davantage d'algorithmes d'IA et une plus large gamme de bases de données dans PilotScope grâce à la puissance de la communauté open source, et explorer davantage d'innovations AI4DB avec les développeurs

Dans le même temps, PilotScope a lancé des applications pilotes au sein d'Alibaba Cloud, afin pour effectuer les tests correspondants sur le déploiement industriel

Zhu Rong a déclaré que AI4DB ne peut générer de la valeur que dans un environnement de production réel. Nous espérons que PilotScope pourra vraiment réaliser cela et aider les bases de données de tous les horizons à atteindre une efficacité et des effets intelligents. Veuillez joindre l'adresse open source :

https://github.com/alibaba/pilotscope

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!