Kontrola kvality AI funkcí je v tomto ohledu neobvyklá a stojí za to ji zmínit ještě před konkrétnostmi, protože vysvětluje, proč je disciplína v této kategorii jiná než všechny ostatní disciplíny kontroly kvality v našem sortimentu.
Každá jiná disciplína kontroly kvality hardwarového produktu kontroluje něco, co je fyzicky přítomné. Baterie buď nabíjí, nebo nenabíjí. Fotoaparát buď zaostří, nebo nezaostří. AI funkce je jiná: jde o chování, které závisí na modelu, síti, službě, jazykovém páru, vstupu a okamžiku. Jednotka může být správně sestavená, přesto může být funkce nefunkční, a závada je v továrně často neviditelná, protože síť, účet a jazyková konfigurace továrny se liší od těch zákazníkových. Proto je smart glasses ai features smart glasses quality control otázkou testování chování v místě použití, nikoli v místě výroby.
Smart glasses ai features: proč selhávají testy na bench
Zákazník, který musí navrhnout tento systém
Čtenářem je specialista na kvalitu značky nebo manažer nákupu, který musí určit, co bude od dodavatele vyžadováno, a který zjistil, že běžný systém kontroly přijatých dodávek zde neplatí. Platí pro hardware. Nemůže však platit pro chování, které závisí na službě.
Praktický problém, který tento článek řeší, spočívá v tom, že zákazník může požadovat tři věci: testovací systém v továrně, který spouští továrna, akceptační systém zákazníka, který spouští zákazník, a společný systém, který spouštějí oba. Většina zmatků v této kategorii vzniká tím, že se nerozhodne, do které ze tří možností konkrétní kontrola patří, a teprve v polovině výrobní série se zjistí, že kontrolu, za kterou nikdo nebyl odpovědný, provádí někdo, kdo neměl přístup k potřebnému účtu nebo stavu sítě.
Tři důvody, proč tovární test nestačí, a co každý z nich odhaluje
1. Účet a odběr. Funkce, která vyžaduje účet, přihlášení nebo aktivní předplatné, může v továrně fungovat naprosto bezchybně, ale u zákazníka, který se nepřihlásil, jehož zkušební období vypršelo nebo který má nevhodný tarif, může být zcela nefunkční. Zákazník pak řekne, že funkce nefunguje, a tovární důkazy její funkčnosti jsou bezcenné. Kontrola, která tento problém odhalí, zahrnuje test nového účtu a test vypršelého tarifu. Obojí vyžaduje přihlašovací údaje, které továrna nemá.
2. Síť a region. Funkce, která běží v cloudové službě, závisí na dostupnosti služby, zákazníkově regionu a místní síti. Tovární test v jedné síti v jedné zemi nedokazuje nic o zákazníkovi v jiné zemi. Projevem je shluk vrácených produktů soustředěný v jednom trhu, který působí jako problém trhu, ale obvykle jde o problém konfigurace sítě nebo regionu.
3. Jazyk a vstup. Překladová nebo hlasová funkce, která funguje v tovární konfiguraci, nemusí zpracovat zákazníkovův jazyk, přízvuk, hlukové prostředí nebo výraz mimo testovací sadu. Nejde o závadu, ale o hranici rozsahu, kterou je nutné zapsat. Kontrola, která tento problém odhalí, je test s vlastní sadou výrazů zákazníka, spuštěný v jeho vlastním prostředí.
Každá ze tří možností produces jiný typ závady a žádnou z nich tovární test neodhalí. To je celým argumentem pro čtyřvrstvovou strukturu níže.

Čtyři testovací vrstvy a to, co každá dokazuje
První vrstva: hardware
Zachycuje mikrofon, funguje procesor, funkční je síťový bezdrátový modul, správně se chová řízení napájení. Jde o tovární test a vrstvu, kterou většina systémů kontroly kvality již pokrývá. Stojí za to ji provádět dobře, protože závada zde je jedinou závadou v celém stacku, kterou lze opravit výměnou jednotky.
Druhá vrstva: služba
Odpovídá koncový bod, autorizuje účet, stav předplatného umožňuje hovor, podporuje region. Tato vrstva vyžaduje živé přihlašovací údaje v konfiguraci podobné zákazníkově. Nelze ji spustit jako tovární test s továrním účtem, protože tovární účet má oprávnění a zákazníkovi účet nemá — a právě rozdíl mezi oprávněným účtem a účtem bez oprávnění zákazník zažívá.
Třetí vrstva: chování
Sada příkazů, latence, přesnost, zpracování požadavků mimo rozsah, degradace v hlučném prostředí. Tuto vrstvu je nutné spouštět podle skriptu, nikoli předvádět, protože ukázka je jediný příznivý případ, zatímco chování představuje rozložení výsledků. Skript patří zákazníkovi, a to z důvodu uvedeného dále v tomto článku.
Čtvrtá vrstva: zážitek
párování, úvodní nastavení, způsob, jakým aplikace zpracuje neúspěšný požadavek, a to, co zákazník uvidí, když dojde k výpadku sítě. Právě tato vrstva způsobuje vratky a zároveň je vrstvou, kterou nikdo netestuje, protože vyžaduje člověka, který daný produkt nikdy předtím neviděl.
Co každá vrstva dokáže a nedokáže prokázat
Výhodou rozdělení jednotlivých vrstev je, že každá poskytuje jiný druh důkazů a má jiného vlastníka.
První vrstva poskytuje záznam z testu proti specifikaci, který může zajistit výrobce. Druhá vrstva poskytuje záznamy o koncových bodech a účtech, takže je nutný účet kupujícího. Třetí vrstva poskytuje výsledný protokol pro každou jednotku a skript musí pocházet od kupujícího. Čtvrtá vrstva poskytuje poznámky z pozorování uživatelské relace a uživatelem musí být kupující.
Tím získáme jasnou odpověď na otázku, kterou si kupující v této kategorii klade nejčastěji: jakou část režimu lze delegovat výrobci. Upřímná odpověď zní: spodní vrstvu a ty části vrstvy služeb, které lze vyzkoušet pomocí testovacího účtu, který zajistí značka a jehož používání výrobci povolí.
Akceptační skript a jeho vlastnictví
Osm položek
- Sada dvaceti příkazů, kterou sepíše kupující, nikoli dodavatel. Každý z nich představuje něco, co daná funkce musí v vašem případu použití umět, a skript se spouští na každém vzorku, nikoli pouze jednou.
- Změřená latence. Doba od konce řeči do začátku odpovědi v prostředí, ve kterém se bude používat. Funkce, která je okamžitá v tiché kanceláři, se na ulici chová jinak.
- Výsledek při závislosti na síti. Co všechno funguje i při vypnutém připojení k internetu. Tento jediný test odhaluje architekturu lépe než jakákoli specifikace.
- Chování při selhání ve čtyřech případech. Nejasný vstup, požadavek mimo rozsah, požadavek v druhém jazyce a požadavek v hlučném prostředí. To, co uživatel v jednotlivých případech uvidí, je rozdíl mezi funkcí a generátorem závad.
- Stav účtu a odběru. Testováno nejméně dvakrát: jednou na novém účtu a jednou na účtu s neplatným odběrem.
- Oblast a síťové podmínky. Alespoň jeden test z jiné sítě a v případě, že se produkt prodává na více trzích, test v síti v každém z nich.
- Cesta pro aktualizaci. Z verze firmwaru dodávané s produktem na aktuální verzi a zkušenost zákazníka se starší verzí. Jde o test, který se přeskočí a poté se lituje.
- Pozice dat. Kde se zpracovávají a ukládají zvuk a výsledná data a co zákazník v aplikaci uvidí. Jde o právní otázku, na kterou kontrola kvality odpověď nemůže, a je nutné na ni odpovědět dříve, než bude test smysluplný.
Proč musí skript sepsat kupující
Jde o jediný nejvíce sporný bod celého režimu, a proto stojí za to jej řádně podložit, pouze tvrdit.
Dodavatel ví, které cesty fungují. Jde o skutečnou odbornost, a proto by měl být dodavatel požádán, aby skript poradil. Kupující je však jedinou stranou, která ví, o co zákazník skutečně požádá, a dvacet příkazů má představovat dvacet věcí, které zákazník skutečně udělá. Skript, který sepíše dodavatel, měří produkt dodavatele proti předpokladům dodavatele a vždy projde.
Nejlepší způsob, jak získat obojí, je nechat kupujícího nejprve sepsat dvacet příkazů a dodavatele požádat o připomínky ještě před spuštěním testu. Kupující si ponechá vlastnictví seznamu; dodavatel získá právo upozornit, že tři z nich nelze v této konfiguraci dosáhnout, což je samo o sobě cennou informací, protože představuje ranou varování ohledně toho, co lze uvést v nabídce.
Jak ze skriptu vytvořit akceptační standard
Skript, který žije v tabulce, nikoli v objednávce, je testem, nikoli standardem. Hranice úspěšnosti musí být stanoveny předem a musí jít o číselnou hodnotu, za kterou je kupující ochoten nechat mnoho testů selhat. Realistické hranice jsou jednoduché: počet z dvaceti příkazů, které uspějí v zadaném prostředí, seznam offlineových funkcí, které zůstanou funkční, horní mez latence a čtyři případy selhání s dohodnutým chováním.
Důsledek neúspěchu byl rovněž dohodnut. V této kategorii je obvyklé ujednání takové, že nevyhovující pilotní dávka se neodesílá a že druhé kolo hodnocení financuje dodavatel. Právě druhá klauzule stojí za to vyjednávat, protože funkce AI je částí produktu, která má největší šanci selhat při prvním přijímacím testu. Dodavatel, který druhé kolo nefinancuje, tak kupujícímu naznačuje, jakou důvěru vkládá do prvního kola.
Kde končí vstupní kontrola a začíná behaviorální testování
Demarcační čára a její obchodní význam
Vstupní kontrola je bránou pro každou dávku, která posuzuje shodu se specifikací. Funguje tehdy, když specifikace popisuje něco fyzicky přítomného, ale nefunguje u chování. Demarcační čára tedy není fází procesu. Rozhodující je, zda lze kontrolu provést pomocí písemné specifikace, kterou si osoba držící daný kus porovná s kusem, a to bez účasti sítě, účtu či jakékoli služby.
Vše nalevo od této čáry tvoří vstupní kontrolu a má být uvedeno v dodavatelské smlouvě jako kritérium uvolnění. Vše napravo od ní tvoří přijímací testování a má patřit do plánu programu, s přidělenými zdroji kupujícího a přiloženým testovacím skriptem kupujícího.
Co uvolnění dávky ve skutečnosti vyžaduje
Uvolnění dávky pro kamerový model z naší řady je jednoduché: jednotka odpovídá zveřejněné specifikaci daného modelu — úrovni rozlišení, kapacitě článku, způsobu nabíjení, době provozu, metodě nabíjení — a v evidence certifikátů podle modelu v seznamu certifikací a v dokumentaci k přepravě baterií je pro danou konfiguraci k dispozici.
U dávky s funkcí AI musí stejné uvolnění navíc zahrnovat artefakt, který v hardwaru nemá precedens: výsledný list ze skriptu přijímacího testování, přiřazený ke konkrétní sestavě firmwaru a konkrétní konfiguraci účtu. Bez tohoto artefaktu se dávka uvolní na základě kvality hardwaru, zatímco stav funkce zůstává neznámý. Předcházení právě této situaci je důvodem, pro který je celý tento článek napsán.
Ke demarcaci čáře existuje ještě druhý praktický aspekt. Testovací skripty jsou v jednotkách levné, ale v koordinaci drahé — dvacet příkazů ve dvou jednotkách odeslané sestavy, včetně běhu bez připojení k síti, v prostředí kupujícího. Koordinační náklady jsou důvodem naplánovat přijímací testování včas, na úrovni pilotní dávky, nikoli až po sériové výrobní dávce. Jsou také důvodem, pro který by si kupující měl vyhradit testovací kusy, nikoli přijímat jakékoli zbylé kusy.
Kdo hradí přijímací testování a co je nutné dojednat
Rozdělení nákladů v tomto režimu je neobvyklé a kupující, kteří řídili hardwarové programy, mají tendenci je podhodnocovat. Hardwarová vrstva je již zahrnuta v ceně jednotky. Vrstva služby stojí značku testovací účet, malé množství datového trafficu a čas osoby, která účet spravuje. Vrstva chování stojí značku dvacet příkazů, prostředí a lidi, kteří zpracovávají pozorovací list. Vrstva uživatelské zkušenosti stojí značku odpoledne cizince.
Jinými slovy, největší část nákladů na přijímací testování nese kupující, nikoli výrobce, a dopadá na lidi kupujícího, nikoli na jeho rozpočet. Proto je tři obchodní body vhodné dohodnout před objednávkou, nikoli během první kampaně.
První bod se týká toho, zda dodavatel financuje druhé kolo hodnocení, pokud první selže. Funkce AI je částí produktu, která má největší šanci selhat při prvním přijímacím testu. Dodavatel, který druhé kolo nefinancuje, tak kupujícímu naznačuje, jakou důvěru vkládá do prvního kola.
Druhý bod se týká toho, zda vůbec dokáže dodavatel skript spustit, což závisí na tom, které vrstvy je oprávněn testovat. Dodavatel s konfigurací účtu může provést testování vrstvy chování; dodavatel bez ní nemůže, a celý režim pak závisí na tom, zda kupující jede do závodu, nebo závod do prostředí kupujícího.
Třetí bod se týká formátu artefaktu. Pokud musí personál závodu po každém běhu výsledný list znovu přepisovat do formátu kupujícího, do čtvrtletka přestane být záznam důvěryhodným. Výsledný list v předepsaném rozvržení, na kterém je uveden identifikátor sestavy, umožňuje využívat důkazy v průběhu celé sériové výroby, nikoli pouze během jedné kampaně.

Čtyři způsoby, jak může režim kontroly kvality AI vytvářet falešný pocit jistoty
Testování ukázkového scénáře. Nascriptovaná ukázka testuje šťastnou cestu v konfiguraci závodu s účtem závodu. Každý z těchto faktorů je řízenou proměnnou a zajímavá selhání se vyskytují právě u neřízených proměnných. Jde o nejčastější chybu a zároveň o nejméně závažnou, protože se obvykle projeví až v terénu, nikoli při auditu.
Zaměstnání funkce závislé na cloudu jako hardwarové funkce. Jakmile funkce závisí na službě, vzniká závislost, kterou výrobce neovládá, a zkušební režim musí tuto skutečnost odrážet. Jde o nejčastější strukturální chybu a právě ta měří výpadek služby v reklamaci podle záruky.
Netestování verze firmwaru dodávané zákazníkovi. Verze na vzorku a verze na výrobním jednotce se mohou lišit a právě v tomto rozdílu se skrývá překvapení. Kontrola je levná — uveďte identifikátor sestavení do každého výsledného protokolu — zatímco opomenutí je drahé, protože změna chování mezi sestaveními je při dosažení zákazníka k nerozlišitelná od závady.
Nechání dodavatele vlastnit akceptační kritéria. Toto je příčinou uvolnění velké dávky bez jakýchkoli důkazů o chování, protože kritéria sepsala strana, která se měří.
Problém eskalace, který je za nimi
Všechny čtyři tyto chyby mají společný důsledek a jde o ten, který má obchodní význam. Závadu s nejasným vlastníkem nelze přidělit. Výpadek služby, vypršelý plán a nesprávně nastavený jazyk se zákazníkovi projevují stejně — funkce nefunguje — ale pouze dva z nich lze vyřešit výměnou jednotky. Matice odpovědností proto není technickým diagramem. Je pravidlem, které rozhoduje, zda se rozpočet záruky vynaloží na jednotky, jež nikdy nebyly vadné, a proto musí triage proběhnout před výměnou, nikoli až po ní.
Produkční pozice, kterou můžeme zastávat, a kterou nemůžeme
Co zahrnuje naše zveřejněná pozice
Hranici, kterou držíme, stanovujeme takto: zveřejňujeme AI funkce podle katalogu a nepřipojujeme k nim název modelu, počet jazyků, latenci, tvrzení o offline fungování ani informaci o předplatném, protože nic z toho nemáme pro modely v této řadě zveřejněné. Marketingové označení nebudeme opakovat jako by šlo o specifikaci a vývozní certifikace našeho katalogu představuje schopnost celé společnosti, nikoli certifikační řádek pro jednotlivé modely, a proto takto ani prezentujeme.
Co můžeme, je přesně vám sdělit zveřejněnou konfiguraci a upřesnit, které z osmi akceptačních položek vyžadují živou službu a účet podobný zákaznickému namísto testu na laboratorním zařízení — protože právě ty režim kontroly kvality ve výrobě neodhalí.
Budeme také přímo odpovídat na obchodní otázky související s funkcí: zda běží na zařízení, nebo ve službě, zda je vyžadováno předplatné, které jazykové dvojice a v jakém směru a kam směřují data. Tyto čtyři odpovědi určují vaši maloobchodní nabídku a nejde o technické otázky.
Co nemůžeme, jasně řečeno
Pro žádný model nemůžeme zveřejnit hodnotu přesnosti, latenci, počet jazyků, offline chování, místo zpracování ani datovou cestu, protože jsme je neměřili za stanovených podmínek. Nemůžeme také poskytnout míru úspěšnosti chování skriptu, protože skript patří kupujícímu a výsledek závisí na jeho formulacích, prostředí a konfiguraci účtu. Dodavatel, který zveřejňuje obecnou míru úspěšnosti pro tuto vrstvu, zveřejňuje číslo vytvořené skriptem, který nikdo nemůže vidět.
Co můžeme, je otestovat funkci společně s vámi. Pošlete nám dvacet příkazů, popište prostředí a konfiguraci účtu a my je spustíme na jimi určených jednotkách, v jimi určeném sestavení a výsledky průběžně zaznamenáme. Měřicí protokol, který řeší tento typ otázky, najdete v článku měření AI funkcí, zkušební protokol pro vzorek v článku testování AI funkcí před objednáním a hlediska pro upgrade, na nichž závisí sedmá akceptační položka, v článku hlediska pro upgrade AI funkcí. Metoda čtení specifikací, která vytváří jednotlivé řádky, je popsána v článku metoda čtení datových listů AI funkcí.
Úkol, který funkce musí plnit
Řekněte nám, co má funkce dělat, a my vám řekneme, co zahrnout do akceptačního skriptu, které z osmi položek můžeme otestovat společně s vámi a které je nutné uzavřít pomocí vašeho účtu a prostředí. Technologický základ platformy najdete v článku technologie AI funkcí a související oblast aplikací v článku řešení pro tvorbu AI obsahu.
Související čtení
- Technologie AI funkcí
- Metoda čtení datových listů AI funkcí
- Hlediska pro upgrade AI funkcí
- Řešení pro tvorbu AI obsahu
- Kontrolní seznam certifikace · Přeprava baterií
Řekněte nám, co má funkce dělat, a my vám řekneme, co zahrnout do akceptačního skriptu.



