assistants vocaux

Google propose un Actions SDK mis à jour et Actions Builder pour Google Assistant

Soumis par admin le

Google se targue d'offrir des expériences vocales convaincantes à plus de 500 millions d'utilisateurs actifs, mais ne veut pas s'arrêter là. Et comme le nerf de la guerre, c'est ici les développeurs, Google veut les aider à créer des applications et services vocaux personnalisés en introduisant une suite d'outils de développement nouveaux et améliorés: Actions Builder et Actions SDK. Des outils qui facilitent et simplifient la création d'actions conversationnelles pour l'assistant, souligne Google.

Actions Builder est un IDE basé sur le Web qui permet de développer, tester et déployer directement dans la console Actions. L'interface graphique vous permet de visualiser le flux conversationnel, de gérer les données de formation sur la compréhension du langage naturel (NLU) et de déboguer avec des outils avancés.

[video:https://www.youtube.com/watch?v=Z1hxvniJ18s autoplay:0]

Pour ceux qui préfèrent les IDE locaux, le SDK Actions mis à jour fournit une représentation basée sur un fichier de projet Actions. Cela permet de créer des données de formation NLU et des flux de conversation localement ainsi que d'importer et d'exporter des données de formation en bloc. Google a également mis à jour la CLI qui accompagne le SDK Actions, afin qu'il soit possible de créer et gérer des projets Actions complètement avec du code.

Google propose un guide de démarrage avec Google Assistant ici.

[video:https://www.youtube.com/watch?v=IKoyKMKTHag autoplay:0]

Actions Builder et Actions SDK sont présentés et documentés ici.

Echec de Cortana sur les terminaux mobiles Android et iOS

Soumis par fredericmazue le

Le 31 janvier 2020, Microsoft va retirer son application Cortana du Play Store et de l'App Store. Cette application n'a jamais été disponible pour le marché français. Ce retrait concerne l'Allemagne, l'Australie, le Canada, la Chine, l'Espagne, l'Inde le Mexique et le Royaume-Uni. L'application devrait continuer de fonctionner aux Etats-Unis.

Ce retrait de Cortana indique que l'assistant vocal n'a pas réussi à séduire, les utilisateurs semblant préférer l'assistant intégré à leur terminal mobile.

Toutefois, Microsoft envisage un avenir à Cortana. Un porte-parole de Redmond a indiqué à The Verge que Cortana viendra notamment apporter de la productivité à Office 365 : "Cortana fait partie intégrante de notre vision plus large consistant à apporter la puissance de l’informatique conversationnelle et de la productivité à toutes nos plates-formes et périphériques. Pour rendre Cortana aussi utile que possible, nous intégrons Cortana plus profondément dans vos applications de productivité Microsoft 365. Une partie de cette évolution consiste à mettre fin au support de l'application mobile Cortana sur Android et iOS."

De nouveaux outils Alexa pour développer, tester et optimiser des Skills

Soumis par fredericmazue le

Amazon a récemment annoncé trois nouveaux outils qui aideront les développeurs à mieux construire, tester et optimiser leurs Skills Alexa. Un outil d’évaluation du langage naturel (NLU) permet aux développeurs de tester par lots les énoncés pour l’interprétation des compétences par rapport aux attentes. La détection de conflit d'énoncés permet aux développeurs de découvrir des énoncés accidentellement mappés à plusieurs intentions. Enfin, une nouvelle API Get Metrics permet aux développeurs de créer des rapports sur la qualité et l'utilisation.

L'outil d'évaluation NLU permet aux développeurs de créer des lots d'énoncés qui peuvent ensuite être testés. Il a trois applications : empêcher le surentraînement, les tests de régression et les mesures de précision.  Cet outil expose une API, la NLU Evaluation Tool API, documentée ici.

La déclaration de conflit par énoncé vise à réduire les inexactitudes causées par la mauvaise correspondance d'intention. L'outil est automatiquement exécuté sur chaque construction de modèle. Les développeurs peuvent l'utiliser avant de publier la compétence ou une version particulière. En limitant ce type de mappage, les modèles devraient générer moins de conflits involontaires. Cet outil expose une API, la Utterance Conflict Detection API qui est documentée ici.

L'API Get Metrics permet aux utilisateurs d'analyser des métriques clés avec des outils tiers. Des mesures telles que les clients uniques, les fonctionnalités totales, les sessions totales, les déclarations totales, etc. peuvent toutes être analysées à partir de données extraites via l'API. L'API Get Metrics est actuellement en version bêta et est documentée ici.

Pourquoi ne pas profiter de ces nouveaux outils pour participer à notre concours Amazon Alexa ? 

Pour tout savoir des meilleures pratiques de développement de Skill Alexa, Joignez-vous à notre Conférence spéciale Amazon Alexa DevCon #8.

Siri, Alexa, Cortana, tous les assistants vocaux sont vulnérables à l'attaque du dauphin

Soumis par fredericmazue le

La technique de l'attaque du dauphin est toute simple. Elle consiste a émettre des signaux audios à une fréquence au delà de 20 kHz. Les dauphins émettent des sons à des fréquences de ce type pour communiquer entre eux. D'où le nom de l'attaque.

A ces fréquences, l'oreille humaine n'entend rien. Mais les assistants vocaux entendent, eux, parfaitement, et exécutent des commandes ainsi reçues. Des chercheurs de l'Université chinoise de Zhejiang décrivent en détail la marche à suivre pour activer ainsi les assistants vocaux.

Pour hacker le smartphone ou le PC du voisin, nul besoin d'un budget digne de la NSA. Le système de hacking construit par les chercheurs chinois leur a coûté 3 dollars seulement.

Moyennant quoi, rien de plus facile que d'envoyer un terminal visiter un site malveillant qui en prendra le contrôle via une autre faille de sécurité par exemple, ou de déclencher un achat à vos frais sur Amazon.

[video:https://www.youtube.com/watch?v=21HjF4A3WE4 autoplay:0]