AI-functies van slimme brillen: een relatie, geen component
De reden waarom een AI-functie niet door een demonstratie kan worden beoordeeld, is niet dat demonstraties misleidend zijn. Het is dat een demonstratie de enige configuratie is waarin een assistent er het beste uitziet: een voorbereide zin, een stille ruimte, een goed werkend netwerk en een exemplaar waarvan de accounts vooraf zijn gekoppeld door degene die het heeft gebouwd. Alles wat een koper moet weten, is een eigenschap van de relatie tussen het apparaat, de modelaanbieder, het netwerk en de regio — en geen van die vier staat in de doos.
De beslissing, in drie zinnen. Als een spraakassistent een cruciale rol speelt in uw productvermelding, test u deze als een relatie en niet als een functie: stel de zinnenlijst en de acceptatiecriteria op voordat het monster arriveert, voer het plan uit op een exemplaar dat niet het demonstratie-exemplaar is en leg bij elk resultaat de firmwarebuild vast. De maatstaf die bepaalt of het product verzendbaar is, is doorgaans het percentage onterechte activeringen en niet het activeringspercentage, want een apparaat dat een klant onderbreekt, is een product dat wordt afgepakt. Als u geen build-id, beschrijving van het datapad en beschreven offlinegedrag op schrift kunt krijgen, moet u de assistent niet in de producttekst opnemen — de functie bestaat dan alleen op de productpagina en nergens anders.
Wie dit plan uitvoert en wat het moet opleveren. De lezer bepaalt doorgaans of een AI-assistent überhaupt in het product thuishoort, of vergelijkt de implementaties van twee leveranciers van dezelfde geclaimde functie. De lezer heeft monsters, een functielijst, een verkoopkanaal, een stukprijsdoel en een marketingplan dat al uitgaat van het bestaan van de functie. De leger heeft geen prestatiegegevens, en dat komt door de structuur: de gegevens zijn eigendom van de modelaanbieder en niet van de fabriek, en ze veranderen met de build in plaats van met de hardware. Het plan moet daarom drie dingen opleveren — een getal in plaats van een indruk, een build-id dat aan dat getal is gekoppeld en een schriftelijke lijst van de omstandigheden waaronder het getal is gemeten.
Wat onze eigen catalogus vermeldt en wat niet. We noemen een AI-spraakassistent bij de belangrijkste technologieën voor de camerabrillefamilie, en onze onafhankelijke site beschrijft AI-vertaling op de K01, een audiomodel. We publiceren voor geen enkel model in het assortiment een activeringspercentage, percentage onterechte activeringen, percentage succesvolle commando's, latentiecijfer, herkenningsnauwkeurigheid, vertaalnauwkeurigheid of offlinegedrag, en we zullen geen van deze schatten. Die schaarste is geen gegevensprobleem dat we hebben nagelaten te verzamelen; het is precies hoe een categorie zonder gepubliceerde prestatiebaseline eruitziet, en de reden dat het onderstaande plan bestaat.
Waar de kosten van een AI-functie liggen. De hardwarekosten van een assistent zijn vrijwel nul — de microfoon en de radio zitten al in het product. Wat een assistent daadwerkelijk kost, zijn de vier zaken eromheen: het werk om testbaar gedrag te specificeren, de lokalisatie van de zinnenlijst en de documentatie voor elke lanceringsmarkt, het supportscript voor foutgevallen en de contractuele mechanismen die u laten weten wanneer de aanbieder iets heeft gewijzigd zonder u te informeren. Twee leveranciers die dezelfde assistent aanbieden, zullen op deze vier punten veel meer van elkaar verschillen dan op enige eenheidsprijs, en dat verschil blijft onzichtbaar tot de productvermelding live staat.

De vijf getallen die u moet eisen en de drie die niemand vermeldt
Stuur deze vijf vragen in één bericht, met exact dezelfde formulering, aan elke kandidaat en vraag om de antwoorden in een tabel in plaats van in lopende tekst. De kolom met de noemer is de belangrijkste, want een percentage zonder noemer is een marketinguitspraak.
| Maatstaf | Wat deze meet | Vereiste noemer | Acceptatielijn |
|---|---|---|---|
| Activeringspercentage | De assistent activeert wanneer dat hoort | Aantal pogingen, aantal sprekers, omgeving | Een percentage waarbij alle drie zijn vermeld |
| Percentage onterechte activeringen | De assistent activeert wanneer dat niet hoort | Aantal pogingen en aantal uren normaal gebruik | Een percentage, of een schriftelijke verklaring dat dit niet wordt gemeten |
| Percentage succesvolle commando's | Uw zinnenlijst wordt begrepen | De zinnenlijst die u hebt aangeleverd en het aantal herhalingen per zin | Een percentage ten opzichte van uw eigen lijst |
| Latentie | De vertraging voordat het antwoord arriveert | Netwerkstatus en firmwarebuild | Een vaste drempel, geen oordeel |
| Herkenningsnauwkeurigheid | Of het juiste geluid is opgepakt | De omgeving en of de spreker naar voren gericht is | Een cijfer voor de stille ruimte en voor de werkelijke omgeving |
De drempelwaarden in begrijpelijke taal en de drie rijen die doorgaans ontbreken
Een percentage zonder aantal pogingen is geen percentage. Negenennegentig procent, gemeten over tien pogingen in een stille kantoorruimte, voorspelt minder dan vijfentachtig procent, gemeten over driehonderd pogingen op straat. Het tweede getal beschrijft het product. De grens die moet worden aangehouden is een percentage met een noemer, een aantal sprekers en een omgeving erbij. Een leverancier die deze drie niet kan leveren, heeft het product niet gemeten.
Het percentage onterechte activeringen is een bruikbaarheidscriterium, geen technische voetnoot. Het bepaalt waar het product kan worden verkocht, en niet of de functie werkt, omdat een vergaderruimte en een straat verschillende markten zijn voor hetzelfde apparaat. Een apparaat dat in een stille kantoorruimte wakker wordt door een hoest is een product voor vergaderruimtes; hetzelfde apparaat op straat is een last. De grens die een inkoper hier stelt, is een productbeslissing over het verkoopkanaal en moet worden vastgelegd voordat de productpagina wordt opgesteld.
Het percentage succesvolle opdrachten moet worden gemeten aan de hand van uw lijst, niet die van de leverancier. De lijst van een leverancier bevat begroetingen en een timer, omdat die eenvoudig zijn. Uw lijst bevat de frase die een magazijnsupervisor werkelijk elf keer per dag uitspreekt. De grens is een percentage ten opzichte van de frases die u hebt aangeleverd, met een vermeld aantal herhalingen per frase.
De latentie moet worden uitgedrukt in een vast getal, niet in een bijvoeglijk naamwoord. Stel de grens vast — minder dan twee seconden is een redelijk uitgangspunt — en meet deze. De latentie varieert met het netwerk. Daarom moet de netwerkstatus deel uitmaken van de meting. Een latentiecijfer zonder netwerkstatus is een cijfer uit het kantoor van de leverancier.
Het buildnummer is de kolom waardoor de resultaten de moeite waard zijn om te bewaren. Een assistent verandert tussen builds. Een meting zonder build-id kan niet worden gereproduceerd, verdedigd of vergeleken met het resultaat van de volgende leverancier. Het is de belangrijkste kolom in het overzicht en tegelijk de kolom die het vaakst leeg blijft.
Drie rijen die bijna nooit worden ingevuld, en wat u met elk ervan moet doen. Het offline gedrag — wat het apparaat doet wanneer het netwerk fysiek is verwijderd — is de rij die de meest voorkomende discussie in deze categorie beslecht: doet het product wat de documentatie zegt wanneer er geen netwerk beschikbaar is? Vraag erom als schriftelijke verklaring en behandel het offline gedrag als ongedefinieerd in de tekst als het antwoord stilte is. Het datapad — wat het apparaat verlaat, waar het naartoe gaat en hoe toestemming wordt behandeld — is de rij waar een nalevingsreviewer om vraagt; verifieer deze door observatie in plaats van door de tekst te lezen en laat de privacyverklaring in uw productvermelding beschrijven wat u hebt waargenomen. En het updateproces — hoe een verzonden exemplaar een nieuwe build krijgt en wie daarover beslist — is de rij die laat zien of de functie kan veranderen zonder contractuele kennisgeving aan u.
Het plan uitvoeren: build-ids, omgevingen en een tweede dag
Stap één, voordat het monster arriveert. Stel de fraselijst op. Deze moet de opdrachten bevatten die de klant daadwerkelijk zal geven, in de taal van de lanceringsmarkt, inclusief de twee of drie die lastig uit te spreken zijn. Stel de grenswaarden vast als getallen. Bepaal welke tests in welke omgeving moeten worden uitgevoerd. Leg de handset, het netwerk en de audioomstandigheden vast. En bepaal de firmware-build die u verwacht dat het monster bevat, zodat u bij aankomst meteen kunt controleren of deze klopt.
Stap twee, op de dag zelf, voordat er iets wordt gemeten. Controleer en leg het build-id van het exemplaar vast. Controleer de taal, de regio en de accountstatus. Controleer of het exemplaar een standaardconfiguratie uit de doos is en geen demonstratie-exemplaar. Dat betekent doorgaans een nieuw account, geen gekoppelde services en standaardinstellingen voor verwerking. Een resultaat van een gekoppeld demonstratie-exemplaar is geen resultaat voor het product dat de klant ontvangt, en dit is de meest voorkomende manier waarop een assistentevaluatie een leverancier in een gunstig daglicht zet.
Stap drie, het activeringspercentage, over een groot aantal pogingen. Gebruik meerdere verschillende sprekers, omdat spraakassistenten meer verschillen per spreker dan per hardware. Leg het aantal pogingen, het aantal sprekers en de omgeving vast en bereken het percentage zelf op basis van het logboek, in plaats van een afgerond cijfer te vertrouwen.
Stap vier, het percentage onterechte activeringen, in de omgeving die ertoe doet. Dit is de langste test in het plan en de test die het vaakst wordt overgeslagen. Dit betekent dat u de assistent ingeschakeld laat tijdens gewone activiteiten — aan een bureau, in een vergadering, op straat — en elke activering vastlegt die niet is aangevraagd. Het getal dat u krijgt, bepaalt het verkoopkanaal.
Stap vijf, het succespercentage van opdrachten, aan de hand van uw fraslijst. Elke aanvraag wordt een vast aantal keren uitgevoerd en de mislukkingen worden met een reden vastgelegd, omdat "begrepen niet" en "begrepen maar het verkeerde gedaan" twee verschillende mislukkingen zijn die twee verschillende oplossingen vereisen.
Stap zes, de latentie, ten opzichte van de vaste drempel. Meet het interval tussen het einde van de uitspraak en de start van het antwoord, leg de netwerkstatus vast en herhaal de meting voldoende keren om de staart van de verdeling te zien in plaats van alleen het gemiddelde.
Stap zeven, het offline gedrag, met het netwerk fysiek verwijderd. Niet de vliegtuigmodus met een beschikbaar resultaat uit de cache — het netwerk moet daadwerkelijk onbereikbaar zijn, waarna het resultaat wordt vastgelegd. Een leverancier die dit nooit heeft getest, heeft een product waarvan het gedrag in een lift onbekend is.
Stap acht, het datapad, geverifieerd door waarneming. Observeer wat het apparaat op het netwerk doet, vergelijk dit met wat de documentatie beweert en bewaar de vergelijking in het dossier. Een privacyverklaring die is opgesteld op basis van een marketingzin is een aansprakelijkheidsrisico, terwijl een privacyverklaring die is opgesteld op basis van een waarneming verdedigbaar is.
Test twee of drie exemplaren van dezelfde build op elke locatie waar de functie bepalend is voor de prestaties. Een functie die bij één exemplaar werkt en bij een ander mislukt, is een opbrengstprobleem. Een opbrengstprobleem blijft onzichtbaar in een test met één exemplaar. Wanneer de functie de reden is waarop de klant het product heeft gekocht, is één exemplaar geen enkel bewijs.
Voer het volledige plan tweemaal uit, op verschillende dagen, en behandel de spreiding als een bevinding. Het gedrag van een assistent varieert met de dag, het netwerk en het omgevingsgeluid. Een groot verschil tussen twee testreeksen laat zien dat de functie niet stabiel genoeg is om als basis voor een claim te dienen. Is de spreiding klein, dan is het resultaat de moeite waard om te bewaren; is deze groot, dan is de bevinding waardevoller dan het getal.
Leg bij elk resultaat de buildidentifier, de omgeving en het tijdstip vast. Bewaar de opnames waar het platform dit toestaat. Een meting die niet kan worden gereproduceerd, is geen bewijs, en in deze categorie is de build het element dat verandert.
Wat u bij elk resultaat moet vastleggen. De modelaanduiding en configuratie, de firmwarebuildidentifier, de appversie, de taal en regio, de accountstatus, de telefoon en het netwerk, de omgeving en het geluidsniveau, de uitgevoerde zin of test, het resultaat, het tijdstip en de tester. Het formulier is lang, en dat is precies de bedoeling: het aantal rijen zorgt ervoor dat het resultaat zes maanden later verdedigbaar is.
Wat dit plan niet kan vaststellen. Het bepaalt niet hoe de functie zich gedraagt bij uw volledige klantenbestand, niet hoe deze zich gedraagt op een markt of in een taal die u niet hebt getest, niet hoe deze zich gedraagt na de volgende wijziging van de aanbieder en niet wat de nalevingspositie is; die komt voort uit documenten. Dat laatste is belangrijk: de Radio Equipment Directive bevat cybersecurity-eisen die deel uitmaken van CE-markering. Deze eisen worden beschreven door de EN 18031-serie geharmoniseerde normen en omvatten beveiligde communicatie, encryptie, beveiligde opslag, toestemming van de gebruiker en het proces voor de afhandeling van vastgestelde kwetsbaarheden. Een spraakassistent valt volledig binnen dit toepassingsgebied, en een gemeten offline gedrag is het bewijs dat het product doet wat de documentatie vermeldt wanneer het netwerk niet beschikbaar is.

Waar een AI-programma misgaat en het vroege waarschuwingssignaal voor elk scenario
De functie wordt aangekondigd in een productvermelding en mislukt tijdens een klantgesprek. Het symptoom is een klacht met een beschrijving van een onderbroken gesprek. De hoofdoorzaak is dat alleen de activeringsratio werd gemeten. De preventie is om beide ratios te meten en de drempel voor onterechte activering vast te stellen voordat de productpagina wordt geschreven.
De klant meldt dat de assistent na een update niet meer werkt. Het symptoom is een groep klachten die begint op een datum die niemand kan verklaren. De hoofdoorzaak is dat de meting aan een build was gekoppeld en de build zonder hertest is gewijzigd. De preventie is om bij elk resultaat de build vast te leggen, het plan opnieuw uit te voeren met de build die daadwerkelijk wordt verzonden en om vooraf op de hoogte te worden gesteld van wijzigingen die het gedrag van de assistent beïnvloeden.
Er wordt een claim over vertaling gemaakt en de beoordelaar in de doeltaal weigert deze. Het symptoom is een productvermelding die beloften doet over interpretatie en een beoordelaar die dit niet kan reproduceren. De hoofdoorzaak is dat de nauwkeurigheid is beoordeeld door iemand die geen moedertaalspreker is, aan de hand van begroetingen in plaats van functionele zinnen. De preventie is om een moedertaalspreker van de doeltaal de zinnen te laten scoren die de klant nodig heeft, met de fraslijst bij de score.
Een privacyvraag wordt beantwoord met een marketingzin. Het symptoom is dat de beveiligingsbeoordeling van een zakelijke klant vraagt naar het datapad, terwijl het merk niets anders heeft dan een beleids-URL. De hoofdoorzaak is dat het datapad nooit is geverifieerd. De preventie is het door observatie te verifiëren en de privacyverklaring zo op te stellen dat deze beschrijft wat is waargenomen.
Het product werkt in het demonstratieland en faalt in de lanceringsmarkt. Het symptoom is een groep retourzendingen uit slechts één markt. De hoofdoorzaak is dat het plan in één regio op één netwerk is uitgevoerd. De preventie is het plan in de lanceringsmarkt uit te voeren, op de netwerken die de klant zal gebruiken, en beide sets resultaten naast elkaar te rapporteren.
Twee beoordelaars komen op dezelfde dag tot tegenovergestelde conclusies. Het symptoom is een shortlist die verandert tussen een vergadering op dinsdag en een vergadering op vrijdag. De hoofdoorzaak is dat de doorlaatvoorwaarden bijvoegwoorden waren. De preventie is de doorlaatvoorwaarden als getallen vast te leggen voordat de samples worden besteld, zodat een meningsverschil wijst naar een vaag criterium in plaats van naar het product.

Wat u kunt contractueel vastleggen wanneer de aanbieder iets wijzigt
De buildidentifier en het updateproces zijn de twee regels die u op de offerteaanvraag moet opnemen. Een leverancier die geen van beide kan noemen, geeft aan dat de assistent zonder contractuele aankondiging aan u kan worden gewijzigd. Dat vormt een groter commercieel risico dan de eenheidsprijs. Het kost niets om beide op te vragen en alleen deze gegevens geven u een aanknopingspunt.
De fraslijst en de doorlaatvoorwaarden horen in de bestelopdracht, met verwijzing als acceptatiecriteria. De assistent is het ene onderdeel van het product waarvoor een klant iemand anders verantwoordelijk kan houden. De criteria moeten daarom schriftelijk bestaan vóór de sample, niet pas na de eerste klacht. Een sample dat aan de criteria voldoet op de build die wordt geleverd, is een sample die u kunt accepteren.
Een meldingsclausule voor gedragswijzigingen is de waardevolste clausule in deze categorie. Elke wijziging van de microfoon, DSP-afstelling, standaardverwerkingsstatus of assistentmodel kan het waarneembare gedrag veranderen zonder de hardware te wijzigen. De clausule moet daarom gedrag dekken en niet alleen onderdelen.
De lokalisatiewerkzaamheden zijn onderhandelbaar en het is de moeite waard om daarover te onderhandelen. De fraslijst, de documentatietaal en het supportscript per markt vormen elk een werkronde, en elke ronde duurt een week. De relevante onderhandeling betreft het aantal werkronden dat is inbegrepen en of een tweede markt wordt geprijsd als een kopie van de eerste of als een nieuwe vertaalopdracht.
De minimale bestelhoeveelheid en de verpakkingswerkzaamheden zijn gewone commerciële posten. Een retentie op het documentatiepakket beschermt de koper bij de storing die het meest kost: een eenheid die wordt geleverd met documenten die er niet op van toepassing zijn. Een aanbetaling met een saldo bij inspectie vóór verzending is de gebruikelijke structuur.
De planning in een assistentprogramma bestaat uit de buildbevriezing en de certificeringsplanning, en beide verschuiven niet doordat een koper aandringt. De buildbevriezing moet vóór de bestelling plaatsvinden, niet erna, omdat een build die na de bestelling verandert alle metingen ongeldig maakt waarop de acceptatiecriteria gebaseerd waren. De certificeringskosten en de doorlooptijd voor certificering volgen het proces en de testinstantie. Aandringen op een van beide leidt tot een langere planning, niet tot een kortere. De gereedschapskosten zijn een eenmalige post die doorgaans over de eerste bestelling wordt verdeeld. De relevante vragen zijn over welk volume deze wordt verdeeld en wat ermee gebeurt als het programma wordt beëindigd.
De documenten die u vóór de aanbetaling moet opvragen. De firmware-buildidentifier en het updateproces. De certificaatnummers met de uitgevende instantie en de geldigheidsdata. De verklaring van overeenstemming voor de exacte modelaanduiding. Een schriftelijke beschrijving van het datapad en het toestemmingsmechanisme. Een schriftelijke verklaring over het offlinegedrag. De modelaanduiding die op de offerte staat.
De clausules die u in de bestelopdracht moet opnemen. De modelaanduiding als afzonderlijk post met de bijbehorende certificaatnummers. De acceptatiecriteria uit de acht tests, met de bijbehorende fraslijst. Een clausule die melding vereist vóór een firmware- of modelwijziging die het gedrag van de assistent beïnvloedt, met de verplichting om opnieuw te testen. Een clausule over wie de kosten draagt wanneer het monster niet aan de acceptatiecriteria voldoet.
Uitgewerkt plan voor een merk dat in één markt lanceert
Dit is een uitgewerkt voorbeeld, geen klantvoorbeeld. Juist die volgorde is het belangrijkste.
Veronderstel dat een consumentenelektronikamerk met elf cameramodellen, een bestaand cameraplatform en een plan om een spraakassistent toe te voegen aan twee configuraties het hoofdkenmerk maakt van een lancering in één markt. De eigen productmanager van het merk heeft producttekst opgesteld waarin de assistent "natural begrijpt" en "altijd beschikbaar is wanneer je hem nodig hebt", en de compliancebeoordelaar van het merk heeft al om het datapad gevraagd.
De eerste beslissing is om de assistent uit de tekst te halen totdat deze is gemeten. De productmanager verwijdert beide bijvoeglijkwoorden en vervangt ze door niets, want een functie die niet nauwkeurig kan worden beschreven, mag voorlopig helemaal niet worden beschreven. Die ene wijziging neemt de grootste risico van het merk weg zonder kosten.
De tweede beslissing betreft de lanceringsmarkt en wordt genomen voordat het plan is opgesteld. Het merk kiest één markt, één taal en de twee netwerken die klanten daadwerkelijk gebruiken, en het accepteert dat de assistent niet in de tweede markt lanceert voordat deze daar is gemeten. De reden is kosten: een fraslijst in één taal is een vertaalopgave, terwijl een fraslijst in een taal die het team niet kan beoordelen een onbruikbaar bezit is.
De derde beslissing betreft de build. Het merk vraagt de leverancier om voor de evaluatie een build-ID vast te leggen en te bevestigen dat dezelfde build wordt geleverd. De leverancier bevestigt een build en het merk legt deze vast. Dit is de beslissing waardoor alle latere cijfers betekenis krijgen, en ze kost één e-mail.
De vierde stap is de test op een apparaat dat niet het demonstratieapparaat is. Hetmerk bestelt een standaardapparaat, richt een nieuw account in en voert de acht tests gedurende twee dagen uit met twee beoordelers. De activeringsratio bij spraak is hoog in de stille ruimte en lager in de doelomgeving. De rate van vals alarm, gemeten gedurende een gewone werkdag, is de bevinding die ertoe doet: deze is zo hoog dat de marketingclaims van het merk een week gebruik in die omgeving niet zouden overleven.
De vijfde beslissing volgt uit de rate van vals alarm. Het merk lanceert de assistent niet in die markt en laat de hardwarelijn zoals deze is. Het alternatief zou zijn geweest om wel te lanceren en een cluster aan klachten te absorberen dat het voorbeeldprogramma al had voorspeld. De evaluatie kostte een voorbeeldronde en een week; het alternatief kostte een lancering.
De zesde beslissing is wat er met het resultaat gebeurt. Het merk neemt de drempel voor vals alarm in de bestelopdracht op als voorwaarde voor een latere firmwarerelease en onderhandelt een meldingsclausule over gedragswijzigingen. Het bewaart de opnames en het overzicht, omdat een toekomstige firmwarerelease opnieuw moet worden getest en het overzicht ervoor zorgt dat die hertest vergelijkbaar is.
Het resultaat is een productlijn die met minder is gelanceerd dan het merk wilde, en een leveranciersrelatie die nu een schriftelijke norm heeft voor de functie die het merk uiteindelijk wil toevoegen. De kern van deze uiteenzetting is dat het beslissende cijfer afkomstig was van een test op een voorbeeldapparaat in plaats van van een demonstratie, en dat dit één apparaat en twee dagen kostte.
Wat onze assistent kan en niet kan vaststellen
Concreet geven we een koper liever de mogelijkheid om een AI-functie te testen dan dat deze een beschrijving ervan gelooft, en alleen een testplan maakt van een mogelijkheid een specificatie. We noemen een AI-spraakassistent een van de sleuteltechnologieën voor de AI-camerabrillefamilie, en onze onafhankelijke site beschrijft AI-vertaling op de K01, een audiomodel. We behandelen dit als een waarneming uit ons eigen marketingmateriaal en niet als een specificatie. We publiceren voor geen enkel model een activeringsratio bij spraak, een rate van vals alarm, een succespercentage van opdrachten, een latencycijfer, een herkenningsnauwkeurigheid, een vertaalnauwkeurigheid of offlinegedrag, en we schatten geen van deze waarden.
We zullen ook geen cijfer in een producttekst opnemen dat op een demonstratieapparaat is gemeten, want een cijfer dat niet kan worden gereproduceerd is een claim die niet kan worden verdedigd wanneer de klant voor je staat. En we leveren apparaten met een bekende firmwarebuild en werken samen met jou aan een plan in plaats van een demonstratie te sturen.
Drie dingen om vast te leggen voordat er een assistent in een producttekst wordt beloofd
Vraag in het eerste bericht om de build-ID en het updateproces. Dit zijn de enige twee antwoorden die aangeven of de functie midden in je programma kan veranderen, en een leverancier die beide beantwoordt, heeft een proces.
Schrijf de fraselijst voordat het monster arriveert. Dit is het enige onderdeel van het plan dat de leverancier niet voor u kan aanleveren, en het is het onderdeel waardoor het slagingspercentage van u is en niet van hen.
Stuur ons de functies die u wilt publiceren, de lanceringsmarkt en de taal, dan schrijven we samen met u het testplan. De achtergrond vindt u bij AI-functies, de monsterroute bij monsterbeoordeling, de meetmethode bij hoe u AI-functies meet en de leveranciersvragen bij verificatie van AI-leveranciers.
Gerelateerde lectuur
- De meettechniek — hoe u AI-functies meet
- De leveranciersvragen — verificatie van AI-leveranciers
- De monsterroute — monsterbeoordeling
Vertel ons welke functies u wilt publiceren en in welke omgeving, dan schrijven we samen met u het testplan.



