Laissez-vous ChatGPT contrôler votre maison intelligente ?

​Josh.ai présente une preuve de concept d'intégration ChatGPT à l'aide de son assistant vocal. Les systèmes Josh ne sont actuellement disponibles que via des installateurs professionnels. Crédit image : Josh.ai

Aujourd'hui, les utilisateurs de maison intelligente peuvent demander à Alexa d'allumer les lumières ou à Siri de vous indiquer la température dans votre chambre, et parfois ils seront précis. Ou vous entendrez peut-être : « Vous disposez de 15 appareils nommés lumières ; lequel souhaitez-vous contrôler ? » ou « La température actuelle à XXX est de 35 degrés Celsius. Mais que se passe-t-il si votre assistant vocal n'est pas seulement toujours précis ? répondre à des commentaires vagues, tels que « Je passe une mauvaise journée ; quelle est une bonne façon de me détendre ? » Avoir une réponse « intelligente » ? Par exemple, en baissant les rideaux, en tamisant les lumières, en réglant le thermostat et en achetant quelques goodies sur une plateforme en ligne ? Alex Capecelatro, co-fondateur de

Josh.ai Home Automation Systems, affirme que c'est le potentiel des assistants vocaux alimentés par de nouveaux modèles de langage d'IA. Josh.ai a commencé l'intégration d'un prototype à l'aide de ChatGPT d'OpenAI. Cette vidéo de démonstration montre Capecelatro demandant à l'assistant de Josh d'ouvrir les rideaux, d'éteindre la musique et de lui indiquer la météo (contrôler trois choses simultanément est quelque chose que Josh a déjà la capacité de faire). Il est ensuite passé à des commandes vocales plus naturelles pour la maison intelligente, comme « Je prends une vidéo ; il fait un peu sombre ici », auxquelles l'assistant vocal a répondu, bien qu'un peu maladroit, en allumant les lumières de la pièce.

La possibilité d’améliorer le contrôle de la maison intelligente en utilisant des modèles linguistiques d’IA pour analyser le langage naturel est très tentante. Capecelatro pense que c'est l'avenir. "Nous essayons de comprendre comment contrôler votre environnement de manière plus naturelle et intuitive", a-t-il déclaré.

Les assistants vocaux d’aujourd’hui nécessitent souvent un langage précis et confondent souvent les commandes de base de la maison intelligente avec des demandes d’informations, ce qui entraîne des réponses frustrantes et parfois inutiles. C'est le problème que Josh.ai a décidé de résoudre lorsque Capecelatro et Tim Gill (fondateur de Quark) ont fondé l'entreprise en 2015. Son assistant vocal éponyme est conçu pour contrôler avec brio les gadgets connectés, quelle que soit la manière dont la demande est exprimée.

« Si nous n'adoptons pas la technologie de type ChatGPT, les entreprises comme la mienne cesseront d'exister d'ici un an. Ceci est essentiel pour l'avenir de toute personne disposant d'un contrôle vocal à la maison.

Utilisez un graphique de connaissances approfondi. modèle, Josh peut interpréter et faire la chose appropriée lorsqu'il entend « satellite » au lieu de « allumer les lumières ». "Ouvrez les rideaux" ressemble à "allez chercher des raisins", mais Josh est assez intelligent pour savoir que vous ne vivez pas dans un vignoble. "Nous passons beaucoup de temps à travailler en coulisse pour corriger les malentendus, gérer les différents accents, comprendre les phrases imparfaites, etc., donc même si vous dites 'allumez ces foutues lumières', nous savons ce que vous voulez dire", a déclaré Capecelatro.

Actuellement, Josh n'est utilisé que comme couche de commande vocale dans les installations de maison intelligente personnalisées alimentées par des sociétés comme Crestron et Control4. Dans cet environnement plus protégé, les systèmes sont configurés et contrôlés par des installateurs professionnels et utilisent du matériel propriétaire de Josh.ai, un assistant vocal connu pour être plus fiable et privé, bien qu'avec un coût d'entrée plus élevé (alors que Josh a un composant cloud. , la plupart des demandes sont traitées localement sur Josh Core et les informations identifiables sont supprimées lors de l'utilisation de l'API basée sur le cloud, a déclaré Capecelatro)

Le système Josh.ai comprend un hub et deux modèles de haut-parleurs intelligents ainsi qu'une application et une intégration avec. la télécommande intelligente Ava. Crédit image : Josh.ai

La société a récemment annoncé un partenariat avec Amazon et mise désormais sur une nouvelle génération de grands modèles de langage (LLM) utilisés par ChatGPT et autres chatbots. Capecelatro estime que ces systèmes rendront les assistants vocaux actuels plus utiles. "Dans un an, personne ne voudra tolérer l'ancienne façon de fonctionner d'Alexa, Google, Siri ou même Josh. Ce n'est pas suffisant", a déclaré Capecelatro. "Si nous n'adoptons pas la technologie de type ChatGPT, les entreprises comme la mienne cesseront d'exister d'ici un an. C'est essentiel pour l'avenir de toute personne disposant d'un contrôle vocal à la maison.

Pour Josh.ai, ce n'est pas le cas." Il n'a pas la même profondeur de connaissances générales que ses concurrents, et l'intégration de ChatGPT ajoutée à la base de connaissances de l'assistant vocal constitue un énorme pas en avant. "Nous avons toujours voulu rendre Josh aussi intelligent que possible, mais nous sommes une petite équipe", a déclaré Capecelatro.

Mais pour les maisons intelligentes en général, l’espoir réside dans la combinaison des capacités conversationnelles des modèles de langage d’IA avec le contexte que les systèmes domotiques peuvent fournir. Par exemple, en comprenant les détails des appareils intelligents que vous avez dans votre maison et la façon dont vous les utilisez, Josh peut analyser les commandes en langage naturel en actions dans votre maison. Dites : « Hey Josh, il est presque l'heure pour les enfants de rentrer à la maison et il commence à faire nuit. Êtes-vous sûr que tout est prêt ? » Par exemple, l'assistant vocal pourrait allumer la lumière du porche, commencer à préchauffer le four, tirer les rideaux, Allumez la lumière de la cuisine.

Josh travaille également sur l'utilisation de ChatGPT pour la découverte de médias dans la maison intelligente. Le chaînon jusqu’ici manquant. "Si vous ne savez pas ce que vous voulez, la commande vocale n'est pas idéale", a déclaré Capecelatro. "Nous avons construit une intégration avec Ava Remote que vous pouvez utiliser pour rechercher le contenu que vous souhaitez regarder. En ajoutant ChatGPT au mix, vous pouvez dire : 'Quelles sont les très bonnes émissions sur Netflix, peut-être des comédies romantiques et en vedette (ceci) casting. "ChatGPT peut compiler une liste et l'afficher sur l'écran de la télécommande." C'est une soirée cinéma en famille.

La mise à niveau de l'IA de Josh n'est pas encore disponible, et Capecelatro a déclaré que la société accorde une attention particulière aux technologies émergentes d'autres sociétés dans ce domaine pour y répondre en fournissant de meilleurs modèles. Outre le fait que ChatGPT est actuellement très lent (la vidéo a été éditée pour l'accélérer), il existe un problème bien réel de génération d'IA. (En fait, l'ensemble de données sur lequel ChatGPT a été formé a pris fin à la mi-2021. Il convient de noter que dans la vidéo de démonstration, lorsqu'on demande à Josh « Quelles émissions sont disponibles sur Netflix ? », l'émission la plus récente répertoriée est Débuts en 2019.) Mais Capecelatro affirme qu'une certaine forme d'assistant vocal génératif à base d'IA fera son chemin dans la maison intelligente.

La prudence est absolument nécessaire. Aucune entreprise ne veut d'un assistant vocal raciste, homophobe et meurtrier qui diffuse ses « opinions » via son matériel dans les foyers, ce qui est une possibilité évidente puisque générer une IA revient essentiellement à régurgiter le contenu sans filtrer le contenu. "Nous étions très prudents. Nous aurions pu utiliser l'intégration ChatGPT immédiatement", a déclaré Capecelatro. "Nous ne l'avons pas fait. Parce que nous ne voulions pas donner aux gens de très mauvaises données. Nous ne voulions pas mentir."

L'entreprise prévoit de passer du temps à trouver comment mettre en place les bons garde-fous, qui le feront. être essentiel pour transformer cette technologie en maisons intelligentes. "Je pense que Microsoft et Google sont allés un peu trop loin [dans leur modèle de recherche ChatBot] et qu'ils en voient maintenant les conséquences", a déclaré Capecelatro à propos de récentes versions très médiatisées qui ont rapidement mal tourné.

Il n’est pas exagéré de supposer que Google, Apple et Amazon travaillent tous sur la manière d’incorporer de nouveaux modèles de langage d’IA dans leurs assistants vocaux, et que les passionnés de maison intelligente ont déjà trouvé des moyens d’utiliser les raccourcis Siri pour intégrer ChatGPT dans leurs téléphones intelligents. maison. Parler à un haut-parleur intelligent est beaucoup plus facile que de taper dans un navigateur Web.

Mais voulons-nous vraiment ce genre d’intelligence artificielle dans nos maisons ? Notre désir d’un assistant vocal qui « fonctionne tout simplement » est-il si grand que nous serions heureux d’en avoir un qui puisse essayer d’enseigner la physique quantique à mon enfant de 8 ans ? Personnellement, je pense qu'un système de maison intelligente fiable et à commande vocale, qui sait ce que je veux dire quand je dis « éteindre ces foutues lumières », serait suffisant, plutôt qu'une intelligence omnisciente gérant ma maison.

Bien que la promesse d'un assistant vocal naturellement performant et hautement intuitif faisant office de parfait majordome de la maison soit très attrayante, je crains que la réalité ressemble davantage à L'Odyssée de l'espace qu'à Downton Abbey. Mais voyons si j'ai tort.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!