Fonctionnalités IA des lunettes connectées: mesurées sur une version logicielle, pas sur un appareil
Une fonctionnalité IA se mesure en taux, en latences et en précision, et aucune de ces mesures ne peut être obtenue en regardant une démonstration. Une démonstration représente le meilleur cas: une phrase préparée, une pièce silencieuse, un réseau connu comme étant fiable et un appareil configuré pour l'occasion. Les fonctionnalités IA des lunettes connectées: comment les mesurer consistent à convertir une capacité en un ensemble de chiffres qu'un acheteur peut inscrire dans une spécification et qu'un autre acheteur peut reproduire. Il est important de procéder correctement, car les promesses relatives à l'IA sont les plus faciles à exagérer et les plus difficiles à défendre, et celles qui échouent ont tendance à échouer en public.
La réponse courte: une fonctionnalité IA se compose de huit mesures, dont deux ne sont pas des mesures de performance — le comportement hors connexion et le cheminement des données, qui déterminent ensemble ce que vous pouvez affirmer dans une fiche produit et ce que votre déclaration de confidentialité doit décrire. Définissez vos propres seuils d'acceptation avant de commencer, réalisez chaque taux de test sur plusieurs appareils et avec plusieurs locuteurs, et enregistrez le numéro de version du micrologiciel avec chaque résultat, car une fonctionnalité IA évolue d'une version à l'autre et une mesure sans numéro de version logicielle ne peut pas être reproduite.
L'acheteur qui décide si un assistant doit être intégré au produit
L'acheteur concerné décide généralement de savoir si un assistant vocal IA doit être intégré au produit, ou de choisir entre les implémentations de deux fournisseurs. Il aura en tête des échantillons, une liste de fonctionnalités et un public cible — des créateurs, des travailleurs de terrain ou des assistants du quotidien. En revanche, il ne disposera d'aucune donnée de performance, car dans cette catégorie, les données sont générées par le fournisseur du modèle et la pile de l'assistant, plutôt que par le fabricant, et elles évoluent selon la version logicielle plutôt que selon le matériel.
Ce dernier point modifie la manière dont un acheteur doit aborder la décision. Une fonctionnalité IA n'est pas une propriété du produit que vous achetez une fois; il s'agit d'une relation entre le produit, un fournisseur de modèle, un réseau et une région. La véritable question de l'acheteur n'est pas « est-ce bon », mais « puis-je le mesurer, puis-je le soumettre à un seuil et que se passe-t-il lorsque le fournisseur modifie quelque chose ».
Trois éléments sont gérés simultanément et tireent dans des directions différentes. Le premier est la promesse: une phrase sur une fiche produit doit résister à l'essai par un client dans une réunion, et la phrase qui résiste est généralement plus restrictive que celle que l'équipe marketing souhaiterait formuler. Le deuxième est la dépendance: l'entité qui exploite le modèle peut être un tiers avec lequel la marque n'a aucun contrat, ce qui constitue un risque procurement plutôt qu'un risque technique. Le troisième est la dérive: un assistant qui évolue chez le client entre deux livraisons constitue un problème de support qui survient sans défaillance du produit et donc sans motif de retour.
L'acheteur est également généralement la personne qui devra répondre à une réclamation concernant cette fonctionnalité des mois plus tard, sur un marché où la réclamation sera rédigée dans une langue que l'équipe de support ne parle pas. C'est pourquoi la fiche de mesure doit être rédigée de manière à survivre à un changement d'équipe: un seuil, un dénominateur, un numéro de version logicielle et une date, plutôt qu'une description des sensations ressenties.

Le coût de maintien d'une fonctionnalité IA et le contrôle réel exercé sur celle-ci
Le coût d'une fonctionnalité IA n'est pas un coût matériel. Il s'agit d'une dépendance continue, dont les éléments figurant sur un bon de commande ne représentent que la plus petite partie.
L'inférence est soit réalisée sur l'appareil, soit hors de celui-ci, et les deux options présentent des formes commerciales complètement différentes. L'inférence sur l'appareil est limitée par le matériel que vous avez acheté et est donc stable et privée par défaut, tout en étant restreinte aux capacités de la puce. L'inférence hors de l'appareil n'est limitée par rien de ce que vous possédez et permet deProposal un assistant véritablement performant — tout en entraînant une dépendance au réseau, une latence, une question de région et l'intervention d'une partie que vous ne contrôlez pas.
L'exploitant de l'environnement d'exécution constitue le fait commercial le plus important figurant sur la fiche. Un fournisseur qui affirme que le modèle est fourni par un partenaire vous indique qu'un tiers peut modifier le comportement de votre produit, sur votre marché, sans que le bon de commande doive être amendé. Il s'agit d'un type de risque différent de celui lié au remplacement d'un composant, car un changement de composant peut être inscrit dans une clause de gestion des modifications, contrairement à un changement de modèle.
La voie de mise à jour est une question d’approvisionnement, et non technique. Une fonctionnalité qui évolue via des mises à jour à distance change sans nouvelle commande, sans nouvel échantillon et sans obligation de préavis, sauf si celle-ci est prévue par écrit. Pour une marque qui a consacré un budget marketing à cette capacité, un changement non annoncé n’est pas un événement technique, mais commercial. La capacité du fournisseur à indiquer un numéro de version et un mécanisme de mise à jour est donc le premier élément à établir, car un fournisseur incapable de nommer la version livrée ne peut pas vous dire ce que vous avez mesuré.
La voie de traitement des données est une question de conformité encadrée par un cadre fixe. Depuis le 1er août 2025, les exigences de cybersécurité de la directive sur les équipements radio font partie intégrante du marquage CE, décrites par la série EN 18031 de normes harmonisées, qui couvre les communications sécurisées, le chiffrement, le stockage sécurisé, le consentement de l’utilisateur et le processus de gestion des vulnérabilités identifiées. Une fonction vocale relève pleinement de ce cadre, et les éléments de preuve qu’une marque sera amenée à fournir ne portent pas sur la précision de la fonction, mais sur la voie de traitement des données qui la sous-tend.
Aucun de ces éléments n’entraîne de frais supplémentaires sur la facture, et c’est précisément pour cette raison qu’ils sont négligés. La marge de négociation se situe dans la structure des engagements plutôt que dans le prix: l’obligation de préavis en cas de modification du micrologiciel, la définition du mode dégradé hors connexion, le droit d’exiger une modification du contrat, la durée pendant laquelle la version mesurée correspond à la version livrée, ainsi que le nombre d’unités incluses dans le lot d’évaluation.

Les huit mesures, leurs seuils et la règle du dénominateur
Demandez par écrit les lignes ci-dessous avant que les échantillons ne soient testés. La colonne de droite permet de distinguer un fournisseur ayant mesuré la version livrée d’un fournisseur décrivant une capacité.
Taux de réveil, avec les conditions de test. Un pourcentage rapporté à un nombre de tentatives donné, dans un environnement donné. « Très réactif » est une réponse imprécise, et c’est celle qui est le plus souvent fournie.
Taux de déclenchement intempestif. Un pourcentage rapporté à un nombre de tentatives donné, dans un environnement donné. C’est la mesure qui détermine si la fonctionnalité est utilisable dans l’espace public, et c’est celle qui est presque jamais communiquée. Un appareil qui interrompt une conversation devient un produit que l’on retire, indépendamment de son efficacité lorsqu’il se déclenche correctement.
Taux de réussite des commandes, sur une liste fixe. Un pourcentage par rapport à une liste fournie par l’acheteur. « Comprend la parole naturelle » est une réponse imprécise, et la liste de phrases doit être celle utilisée par votre client, et non celle de la démonstration.
Latence, avec l’état du réseau. Un chiffre assorti d’un seuil fixe et de l’état du réseau clairement indiqué. « Très rapide » est une réponse imprécise. La latence sépare une fonctionnalité qui paraît réactive d’une fonctionnalité qui semble défaillante, et elle varie selon les conditions réseau, ce qui explique pourquoi l’état du réseau doit faire partie de la mesure.
Précision de la reconnaissance selon les conditions. Un chiffre pour une pièce silencieuse et pour l’environnement réel. « Précision élevée » est une réponse imprécise. Les accents, le bruit ambiant, un vocabulaire inhabituel et une voix basse modifient ce chiffre, et celui qui compte est celui correspondant à votre client.
Précision de la traduction, évaluée par un locuteur natif. Une appréciation des phrases dont le client a besoin. « Traduction précise » est une réponse imprécise, et une traduction qui gère correctement les salutations mais échoue sur une description de produit échoue aux yeux de l’acheteur.
Comportement hors connexion. Une déclaration écrite de ce qui se produit lorsque le réseau est coupé. Le silence à ce sujet est la réponse la plus fréquente, et il tranche le différend le plus courant dans cette catégorie: savoir si le produit fait ce que sa documentation annonce lorsque le réseau est absent.
Voie de traitement des données et mécanisme de consentement. Une description de ce qui quitte l’appareil et de la manière dont le consentement est géré. « Les données sont traitées de manière sécurisée » est une réponse imprécise et ne signifie rien.
Version du micrologiciel et mécanisme de mise à jour. L’identifiant de la version et la manière dont une unité livrée est mise à jour. « Mises à jour via l’application » est une réponse imprécise.
Désignation du modèle. Une désignation publiée correspondant à la configuration exacte. Un simple nom de série est une réponse imprécise, car il permet de comparer deux configurations sans que l’une ou l’autre puisse être identifiée.
Un taux sans nombre de tentatives n’est pas un taux. Chaque pourcentage de cette liste nécessite un dénominateur, une liste de tentatives et un environnement. Un « taux de réveil de 98 % » mesuré sur dix tentatives dans un bureau silencieux est un résultat moins bon qu’un « taux de réveil de 85 % » mesuré sur trois cents tentatives dans la rue, et seul l’un d’entre eux permet de prédire quoi que ce soit. C’est l’erreur la plus courante dans cette catégorie, et elle reste invisible en l’absence de dénominateur.
Le taux de fausses activations est le critère d’ergonomie, et non une note technique. Le seuil fixé par l’acheteur constitue une décision produit déterminant les marchés sur lesquels le produit peut être vendu: une salle de réunion et une rue représentent deux marchés différents pour le même appareil.
Le numéro de version est la colonne qui rend les résultats dignes d’être conservés. Une fonctionnalité IA évolue d’une version à l’autre, et une mesure sans numéro de version ne peut être reproduite ni défendue. Si un fournisseur est incapable d’indiquer la version, il ne peut pas vous dire ce que vous avez mesuré.
Un avertissement s’applique à chaque ligne: ces chiffres ne sont pas directement comparables entre fournisseurs. Deux implémentations utiliseront des listes de phrases, des réseaux, des nombres de tentatives et des définitions de l’activation réussie différents. Avant de créer un tableau, déterminez quelle colonne correspond à votre propre mesure et laquelle constitue un chiffre fournisseur, et ne les juxtaposez jamais dans une même ligne sans de note.

Exécuter la grille deux fois, sur plusieurs unités et dans deux environnements
1. Créez la grille de mesure avant le premier test. Cinq colonnes, pas plus: le test, la condition, le nombre de tentatives, le résultat et la date associée au numéro de version du micrologiciel. Une grille comportant davantage de colonnes ne sera pas remplie, et une grille non remplie ne produit qu’une démonstration.
2. Testez deux ou trois unités de la même version lorsque la fonctionnalité est déterminante. Une fonctionnalité qui fonctionne sur un exemplaire et échoue sur un autre révèle un problème de rendement, invisible lors d’un test sur une seule unité.
3. Testez une unité sortie de l’emballage avec un nouveau téléphone, et non l’unité de démonstration. L’unité de démonstration dispose des comptes associés, de la langue définie, de la région configurée et d’un réseau connu comme fonctionnel. L’unité sortie de l’emballage est le produit que reçoit le client, et la différence entre les deux constitue la cause la plus fréquente d’une fonctionnalité qui fonctionne dans une salle de réunion, mais pas dans la cuisine d’un client.
4. Effectuez les tests dans deux environnements et présentez les deux résultats. Chaque taux possède une valeur dans une pièce calme et une autre dans la rue; seule la seconde prédit l’expérience du client. Communiquer l’un des deux sans l’autre revient à choisir le client auquel vous souhaitez vendre.
5. Utilisez les phrases qu’un client utiliserait, et non celles que vous employez. Modifier le script entre deux exécutions rend les deux séries incomparables, et c’est la forme la plus courante de l’erreur. Conservez la liste de phrases avec les résultats.
6. Exécutez l’ensemble de la grille deux fois, à des jours différents. Considérez un écart important entre les deux exécutions comme un résultat significatif, et non comme du bruit. Une fonctionnalité dont le taux de réussite varie de vingt points d’une exécution à l’autre n’est pas stable, et un produit fondé sur celle-ci offre au client une expérience loterie.
7. Vérifiez le cheminement des données au lieu de le mesurer. Observez le comportement du réseau, comparez-le aux affirmations de la documentation et consignez cette comparaison. Cela relève du dossier de vérification, et non du laboratoire, car il s’agit d’une confrontation à un document plutôt que d’une mesure chiffrée.
8. Répétez la grille sur la version qui sera effectivement commercialisée. La mesure commercialement déterminante est celle réalisée sur la version utilisée par le client; si elle vous parvient après votre exemplaire, la grille doit être réexécutée sur celle-ci.
Quatre façons dont un programme de fonctionnalités IA échoue, et les points à négocier
La fonctionnalité est annoncée dans une fiche produit, mais échoue lors de la réunion d’un client. Cause racine: le taux de fausses activations n’a jamais été mesuré, seul le taux de réveil l’a été. Prévention: mesurez les deux et fixez le seuil des fausses activations avant la rédaction de la fiche produit.
Le client signale que l’assistant ne fonctionne plus après une mise à jour. Cause racine: la mesure était liée à une version, et celle-ci a changé sans nouveau test. Prévention: enregistrez le numéro de version avec chaque résultat et réexécutez la grille sur la version qui sera effectivement commercialisée.
Une promesse de traduction est faite, mais le réviseur de la langue cible la rejette. Cause racine: l’exactitude a été évaluée par une personne ne speaks pas natively la langue cible, à partir de salutations plutôt que de phrases opérationnelles. Prévention: faites noter par un locuteur natif de la langue cible les phrases dont le client a besoin, et consignez la liste de phrases.
Le produit fonctionne dans le pays de démonstration, mais échoue sur le marché de lancement. Cause racine: la mesure a été effectuée dans une seule région, sur un seul réseau. Prévention: exécutez la grille sur le marché de lancement, avec les réseaux que le client utilisera, et présentez les deux séries de résultats.
Un programme de fonctionnalités IA dépense proportionnellement davantage en unités d’évaluation qu’un programme matériel, car la fonctionnalité constitue le produit et le nombre d’échantillons représente l’intervalle de confiance. Voici les points sur lesquels il vaut la peine de consacrer du temps à la négociation:
- Quantité minimale de commande et nombre d’unités d’évaluation, qui doit être supérieur ici à celui d’une catégorie de matériel, car le nombre d’échantillons correspond à l’intervalle de confiance.
- Conception de l’emballage et de la notice, y compris les étiquettes de marché, la langue du dossier documentaire et le libellé du consentement, qui, dans cette catégorie, constitue un artefact de conformité plutôt qu’une notice.
- Division de la livraison en fonction d’une étape d’approbation des échantillons, souvent accordée plus facilement qu’une remise sur le prix.
- Les seuils de paiement: un acompte à la signature, un solde payable à la validation de l’inspection et une retenue sur le dossier documentaire.
- La période de garantie assortie d’un délai de réponse, ainsi que la politique de retour, qui doit tenir compte d’une fonctionnalité susceptible de changer sans préavis.
Deux coûts d’un programme de fonctionnalités sont chiffrés, mais non négociés. Le coût de certification et le délai de certification suivent le processus et l’organisme de contrôle plutôt que le volume de votre commande et, pour un produit connecté, comprennent les exigences de cybersécurité de la directive sur les équipements radioélectriques. L’outillage est souvent amorti sur la première commande. Deux éléments en découlent: le volume sur lequel la charge est répartie et l’emplacement de l’outillage si le programme est abandonné. Sous les deux se trouve le processus de mise à jour: un fournisseur incapable d’indiquer un numéro de version et un mécanisme de mise à jour vous signale que la fonctionnalité peut changer sans notification contractuelle, ce qui représente un risque commercial plus important que le prix unitaire.
Le dossier à demander avant le versement de l’acompte comprend: l’identifiant de la version du micrologiciel et le mécanisme de mise à jour; les numéros de certificat, avec l’organisme émetteur et les dates de validité; la déclaration de conformité correspondant exactement à la désignation du modèle; une description écrite du flux de données et du mécanisme de consentement; ainsi que la désignation du modèle indiquée sur le devis.
Les clauses contractuelles qui protègent une revendication de fonctionnalité IA sont les suivantes: la désignation du modèle en tant que ligne séparée, avec les numéros de certificat annexés; les critères d’acceptation de l’échantillon, faisant référence à la fiche de mesure et aux seuils fixes; une clause exigeant un préavis avant toute modification du micrologiciel affectant le comportement de l’assistant, afin de permettre à l’acheteur de procéder à de nouveaux tests, ainsi qu’une période définie durant laquelle la version mesurée est la version livrée; et une clause précisant qui assume les frais lorsque l’échantillon ne respecte pas les critères d’acceptation.
Un assistant pour le service sur le terrain, mesuré, et la limite de ce que nous pouvons publier
Considérons un scénario hypothétique plutôt qu’un vrai projet client. Supposons qu’un acheteur côté marque ajoute un assistant à une gamme existante de produits avec caméra destinée à un canal de service sur le terrain, où l’utilisateur final travaille dans un environnement bruyant, peut porter des gants et utilisera le produit avec un partenaire qui parle également.
Première étape: le besoin. L’assistant est souhaité pour capturer des notes vocales lors d’une visite de site, dans un endroit bruyant, avec un partenaire parlant à proximité. Cette seule phrase fixe les seuils: le taux de déclenchements intempestifs doit être suffisamment faible pour que la conversation du partenaire n’active pas l’appareil, le taux de réveil doit être mesuré avec la liste de phrases qu’un eur de terrain utiliserait réellement, et la précision de la reconnaissance doit être communiquée dans les conditions bruyantes plutôt que dans un environnement calme.
Deuxième étape: la fiche. L’acheteur élabore une fiche à cinq colonnes, fixe les seuils avant l’arrivée des échantillons et demande au fournisseur le numéro de version ainsi que le mécanisme de mise à jour dans le même message. Le fournisseur renvoie un taux de réveil sans dénominateur ni version, accompagné d’une description « highly responsive » du comportement de déclenchement intempestif. Les deux réponses sont consignées dans le dossier comme des constatations et non comme des résultats.
Troisième étape: les unités. Trois unités de la même version sont testées, sur une unité sortie de l’emballage avec un téléphone neuf, dans une pièce calme et dans la rue. Le taux de réveil est nettement inférieur dans la rue par rapport au chiffre du fournisseur, obtenu dans une pièce calme, et l’une des trois unités produit un déclenchement intempestif que les deux autres ne produisent pas. La différence entre les unités est la constatation la plus importante, car il s’agit d’un problème de rendement et non d’un problème de produit, et elle transforme la question de « est-ce satisfactory? » en « est-ce suffisamment cohérent pour figurer sur une page produit? ».
Quatrième étape: la répétition. L’ensemble de la fiche est de nouveau exécuté deux jours plus tard, sur les mêmes unités, et le taux de réveil varie fortement. C’est cette constatation qui met fin à la discussion sur la publication d’un taux de réveil et qui oriente l’acheteur vers une revendication que le produit peut réellement soutenir: l’assistant existe, il répond à la liste de phrases et il est mesuré sur une version désignée.
Cinquième étape: la structure commerciale. L’acheteur inscrit dans le bon de commande l’obligation d’information relative aux mises à jour du micrologiciel qui affectent l’assistant, définit l’état dégradé en mode hors ligne comme un comportement accepté plutôt que comme un défaut, associe la communication au modèle qui sera livré et scinde la première livraison en deux étapes conditionnées à un jalon d’approbation d’un échantillon. Le résultat est une fonctionnalité présentée au niveau que les preuves permettent d’établir, plutôt qu’une fonctionnalité présentée au niveau suggéré par une démonstration et qui échoue en public.
Notre propre position est la suivante: nous publions les capacités IA quetakes notre documentation étaye et indiquons les autres comme étant encore en développement; nous préférons que l’acheteur réalise lui-même ces mesures plutôt qu’il croie une simple description. Notre catalogue mentionne un assistant vocal IA parmi les technologies clés de la gamme de lunettes avec caméra, et notre site indépendant décrit la traduction IA sur le K01, qui est un modèle audio; nous considérons donc cela comme une observation issue de notre propre matériel marketing plutôt que comme une spécification. Nous ne publions aucun taux de réveil, aucun taux de déclenchement involontaire, aucun taux de réussite des commandes, aucune valeur de latence, aucun taux de reconnaissance, aucun taux de précision de traduction et aucun comportement hors ligne pour aucun modèle, et nous n’estimerons aucun de ces paramètres. Nous n’indiquerons pas non plus dans une fiche produit une valeur mesurée sur un appareil de démonstration, car une valeur impossible à reproduire est une affirmation qui ne peut être défendue lorsque le client se trouve devant vous.
Ce que nous ferons, en revanche, est vous fournir des appareils dont la version du micrologiciel est connue et vous accompagner dans la réalisation de la fiche de mesures plutôt que de vous envoyer une démonstration. Le protocole est présenté dans les tests des fonctionnalités IA avant commande, les questions à poser aux fournisseurs figurent dans la vérification des fournisseurs IA, les erreurs d’affirmation à éviter sont répertoriées dans les erreurs courantes liées à l’IA, et le contexte est expliqué dans les fonctionnalités IA.
Prochaines étapes. Listez les fonctionnalités que vous entendez publier, l’environnement dans lequel elles seront utilisées et les expressions que le client prononcera réellement. Fixez les seuils avant la réception des échantillons. Appliquez la fiche de mesures sur trois appareils, dans leur état de livraison, dans deux environnements, deux fois, et notez le numéro de version avec chaque résultat. Décidez ensuite, chiffres à l’appui, quelle fonctionnalité mérite d’être présentée sur la page et laquelle ne le mérite pas.
Lectures complémentaires
- Le protocole de test d’un échantillon — tests des fonctionnalités IA avant commande
- Les questions à poser d’abord à un fournisseur — vérification des fournisseurs IA
- Les erreurs d’affirmation à éviter — erreurs courantes liées à l’IA
Indiquez-nous les fonctionnalités que vous entendez publier ainsi que l’environnement concerné, et nous rédigerons la fiche de mesures avec vous.



