OEM/ODM-tillverkare av smarta glasögon · Shenzhen, Kina +86 19835872450 sales@cynrin.com
Teknik för smarta glasögon

AI-funktioner för smarta glasögon: Behöver du dem?

Det ärliga svaret är att en AI-funktion bara är värd att köpa om du kan beskriva dess fel – och i den här kategorin kan de flesta inte det.

Av CYNRINs ingenjörs- och inköpsgrupp/ Oct 5, 2024/ 16 min läsning
AI-funktioner för smarta glasögon: Behöver du dem?

AI-funktioner för smarta glasögon: de tre avgörande frågorna

Det ärliga svaret är att en AI-funktion bara är värd att köpa om du kan beskriva dess felmodus, och i den här kategorin kan de flesta köpare inte det – inte för att funktionen är svag, utan för att beteendet ligger utanför produkten. AI-funktioner för smarta glasögon, behöver du dem är därför ett test med tre frågor, följt av tre verkliga fall där funktionen får plats och en regel som avgör båda.

De tre frågorna är vad som händer utan nätverk, vad som händer när prenumerationen löper ut och vad som händer med datan. Om du inte kan besvara alla tre skriftligen hos leverantören är det korrekta beslutet inte om du ska gå vidare – det är vad du ska skriva i produktbeskrivningen tills du kan.

AI-funktioner för smarta glasögon: var varje AI-förmåga faktiskt utförs och vem som styr den

AI-genererat foto som illustrerar AI-funktioner för smarta glasögon: behöver du dem verkligen? – bild 1 av 3

Vem köparen är och vad assistenten kostar

Köparen i den här kategorin är en produktchef på ett varumärke eller en inköpare i en säljkanal, och de lägger oftast till en röstassistent eller ett översättningslager i en produkt som redan finns. Skälet till att de överväger det är sällan tekniskt. Det är att funktionen syns i produktbeskrivningarna för produkter de beundrar, att en kund har bett om den eller att en konkurrents produktsida har den och jämförelsen nu finns i kundens huvud.

Det köparen fruktar är inte att assistenten ska vara dålig. Det är att assistenten fungerar väl i demonstrationen men saknas i en kunds källare, i en hiss eller under ett internationellt flyg – och att den efterföljande klagomålet tillskrivs produkten i stället för nätverket. Den andra rädslan är att ett påstående om funktionen ska dyka upp i en produktbeskrivning och sedan visa sig felaktigt, vilket leder till en granskning av produktbeskrivningen eller ett åtgärdande från marknadsplatsen.

Båda rädslorna är billiga att förebygga och dyra att åtgärda, eftersom förebyggande är en fråga och åtgärdandet är en omtryckning, en ändring av supportscripten och en returenhet. Den viktiga strukturella punkten är att en AI-funktions prestanda huvudsakligen är en upplevelse av nätverket och modellen. Inspelningen, uppspelningen och aktiveringen av aktiveringsordet finns i enheten; igenkänningen, svaret, fördröjningen och precisionen sker utanför enhetens ram, på en telefon eller i en server.

Det har två konsekvenser som en affärsplan bör spegla. Prestandan styrs inte av varumärket genom att man väljer en bättre glasögonleverantör. Och prestandan varierar med nätverket, vilket innebär att demonstrationen på ett kontor inte är demonstrationen vid en välbesökt evenemang, och det är den senare som kunden kommer att återskapa.

Vad det faktiskt kostar att driva en AI-funktion

Kostnaden för en AI-funktion ligger nästan aldrig i materialkostnaden, och ett projekt som inte har skiljt engångskostnaderna från de återkommande kostnaderna har inte slutfört sin kostnadsberäkning.

Tjänsteinferens, om funktionen körs i en tjänst. Varje användning kostar pengar att betjäna, och kostnaden skalar med användningen snarare än med antalet sålda enheter. En produkt vars funktion används intensivt är en produkt med rörliga kostnader per användare, vilket är en annan affär än en produkt med marginal per enhet.

Datahantering. Att fånga in, överföra, lagra och eventuellt transkribera eller översätta personuppgifter i en produkt som bärs på någons ansikte. Både arbetet för överensstämmelse och arbetet med infrastruktur skalar med användningen, och var data lag placerar sig är oftast den första frågan ett överensstämmelseteam ställer.

Underhåll. Plattformsreleased, modelluppdateringar, säkerhetsrättningar och appens egen releasecykel. Det är den post som oftast överstiger utvecklingskostnaden under en produkts livstid, och den post som oftast saknas i projektbudgeten, eftersom det är en återkommande driftskostnad snarare än ett projekt.

Modelllicensiering, om en tredjepartsmodell används. Vissa är gratis att integrera och andra är det inte, och detta går inte att uppskatta utifrån en katalog som inte anger modellen.

Silikon och ström, om modellen körs på enheten. En modell på enheten konkurrerar med kameran och ljudet om processorarea och strömbudget, och båda är begränsade. De publicerade körtiderna i vårt sortiment – ungefär fem till åtta timmar i kamerakategorin, ungefär sex till åtta i ljudkategorin och ungefär tjugo i barnmodellerna – är den begränsning som funktionen måste passa inom.

Beslutsvägen nedan reducerar frågan till något som en köpare kan besvara på ett möte. Observera formen: grundfrågan är inte om funktionen är bra, utan om du kan skriva ned hur den misslyckas. Det är samma sak som att fråga om du kan ge support, vilket i sin tur är samma sak som att fråga om du kan publicera den.

De fyra frågor som avgör om funktionen har en uppgift

AI-genererat foto som illustrerar AI-funktioner för smarta glasögon: behöver du dem verkligen? – bild 2 av 3

Mätningarna som avgör köpet, och trösklarna som ska hållas

En AI-funktion mäts i frekvenser, svarstider och noggrannhet, och mätningen är själva specifikationen. Nedan anges de mätningar som en köpare bör kräva av en leverantör, med villkoret för varje mätning och vilken form svaret måste ta.

Mätning Hur den mäts Tröskeln som ska hållas Hur ett vagt svar ser ut
Aktiveringsfrekvens Försök, högtalare, miljö En procentsats över ett angivet antal försök, i målmiljön "Mycket responsiv"
Frekvens av falska aktiveringar Försök i en tyst och en bullrig miljö En procentsats, angiven separat för varje miljö Redovisas inte alls
Frekvens av lyckade kommandon En fast fraslista och ett fast antal försök En procentsats jämfört med köparens egen lista "Förstår naturligt tal"
Slut-till-slut-latens Från slut på tal till svar, med nätverksläget angivet Ett värde jämfört med en fast tröskel "Mycket snabbt"
Recognitionsnoggrannhet Per språk och per förhållande Ett värde för köparens språk "Hög noggrannhet"
Översättningsnoggrannhet Bedömning av modderspråkiga talare, med fungerande fraser En bedömning av köparens fraslista "Noggrann översättning"
Offlinebeteende Nätverket kopplas bort fysiskt En uppräknad lista över funktioner som fortfarande fungerar "Den fungerar fortfarande offline"
Datapassage Observerat nätverksbeteende, jämfört med dokumentationen En skriftlig beskrivning per marknad "Hanteras säkert"
Prenumeration och upphörande Vad som händer med varje funktion när abonnemanget löper ut En skriftlig position per funktion "Det finns ett valfritt abonnemang"
Fast programvara och uppdatering Buildidentifierare och hur en levererad enhet uppdateras En build och en uppsägningstid "Uppdateras via appen"

Fyra av dessa förtjänar ett särskilt kommentar, eftersom det är de som avgör om funktionen är en säljbar fördel eller bara en post i en funktionslista.

Frekvensen av falska aktiveringar är användbarhetsgrinden, inte en teknisk bisats. En enhet som avbryter ett kunds samtal är en produkt som tas av, oavsett hur väl den fungerar när den väl aktiveras. Tröskeln som köparen anger här är en kanalstrategisk fråga: ett mötesrum och en gata är olika marknader för samma enhet.

Frekvensen av lyckade kommandon betyder något endast i förhållande till en lista som ni har tillhandahållit. En hög framgångsfrekvens med en fraslista som leverantören själv skrivit är mycket mindre värd än en måttlig framgångsfrekvens med listan som era kunder faktiskt använder, och det är den senare som förutsäger returer.

Latens kräver en fast tröskel och ett angivet nätverksläge. När latensen bedöms i stället för att mätas är den en känsla; när den mäts mot en tröskel med nätverket angivet är den en specifikation. Den varierar också med nätverksförhållandena, vilket är anledningen till att nätverksläget måste ingå i mätningen och inte bara i testrapporten.

Offlinebeteendet är en uppräknad lista, aldrig ett ja eller nej. Frågan är: "Vilka funktioner fungerar utan nätverk?" "Den fungerar offline" är inte ett svar, och det är just det svaret som generates reklamationer.

En varning gäller hela tabellen: dessa värden går inte att jämföra direkt mellan leverantörer om inte förhållandena anges. En aktiveringsfrekvens som mätts i ett tyst kontor och en som mätts på en gata är två olika mätningar, och samma sak gäller latens, noggrannhet och alla andra rader.

AI-genererat fotografi som illustrerar AI-funktioner för smarta glasögon: behöver du dem verkligen? — bild 3 av 3

Fastställ vad funktionen gör, skriftligt

Verifiering av en AI-funktion kombinerar dokumentation och beteende, och det är den beteendebaserade delen som vanligtvis hoppas över.

Den femstegsväg från en funktionsbeskrivning till ett acceptanskriterium

Steg ett: skriv testprotokollet innan exemplet kommer. En numrerad lista över tester, där varje test har ett angivet förhållande och ett angivet godkännandevillkor. "Aktiveringsordet utlöses inom två försök i ett rum med cirka 60 decibel" är ett test. "Den röststyrda assistenten fungerar bra" är inte ett test, och skillnaden mellan dem är skillnaden mellan en beställningsklausul och en åsikt.

Steg två: kör testet på minst två enheter med samma build. En funktion som fungerar på ett exemplar men misslyckas på ett annat har ett yieldproblem, och ett yieldproblem är osynligt i ett test med en enda enhet. Två enheter visar också något som ett laboratorietest inte kan: om produkten är konsekvent.

Steg tre: testa utan nätverk. Det här är det steg som de flesta varumärken inte utför, och det är det steg som avslöjar ett beroende av en tjänst på ett sätt som ett laboratorium aldrig kan. Dokumentera funktion för funktion vad som fortfarande fungerar, och den listan blir ert påstående om försämrad funktionalitet.

Steg fyra: testa felbeteendet, inte bara beteendet vid framgång. Vad ser användaren när funktionen misslyckas? En funktion som misslyckas tyst är sämre än en som misslyckas synligt, och båda är bättre än en som en supportrepresentant inte kan diagnostisera eftersom enheten inte publicerar något tillstånd. Skriv in felstatus i instruktionerna och supportscriptet.

Steg fem: Ange kriterierna och mätningen i beställningen. Ett kriterium som finns i ett e-postmeddelande är inte bindande. Ett kriterium i beställningen är en acceptansstandard, och en chargesats som inte uppfyller den är en chargesats som du kan avvisa.

Beviset att begära före beställning, per kategori

Sex sätt på vilka ett AI-program gör besvikelse efter lansering

Funktionen fungerar på kontoret men inte i en källare, en hiss eller ett flyg. Symptomet är ett kluster av returer där alla nämner samma sak utan att ange orsaken. Grundorsaken är att beteendet utan nätverk aldrig fastställdes. Förebyggande åtgärd är testet utan nätverk, och annonsen bör innehålla en beskrivning av försämringen snarare än en beskrivning av funktionsförmågan.

En kund slutar använda funktionen under den andra veckan, och returerna kommer aldrig in. Symptomet är ett minskad engagemang utan några klagomål alls, vilket är den svåraste typen av fel att upptäcka. Grundorsaken är att en funktion som används tio gånger första dagen och aldrig mer inte är en funktion som produkten kan säljas på. Förebyggande åtgärd är genomgången under den andra veckan.

En firmwareuppdatering ändrar beteendet och annonsen blir nu felaktig. Symptomet är en förfrågan på en marknadsplats eller en supporttråd om en funktion som har ändrats. Grundorsaken är att det varken finns en uppsägningstid eller någon utlösare för granskning av texter. Förebyggande åtgärd är att ange båda i avtalet.

Frågan om data kommer och ingen kan besvara den. Symptomet är en upphandlings- eller efterlevnadskontroll som stannar av. Grundorsaken är att dataflödet aldrig dokumenterades. Förebyggande åtgärd är en skriven beskrivning för varje marknad, och en integritetsinformation som byggs utifrån den i stället för utifrån en mall.

Prenumerationen upphör och kunden äger något som har slutat fungera. Symptomet är ett supportärende formulerat som ett fel. Grundorsaken är att beteendet när prenumerationen löper ut aldrig efterfrågades. Förebyggande åtgärd är frågan i underlaget och bestämmelsen i beställningen.

En konkurrent lanserar samma påstående och det är ditt påstående som ifrågasätts. Symptomet är ett annonspåstående som inte längre särskiljer er. Grundorsaken är att påståendet positionerades utifrån funktionsnamnet i stället för ett uppmätt beteende. Förebyggande åtgärd är att publicera mätningen, eftersom en mätning är försvarsbar medan ett funktionsnamn inte är det.

Där pengarna i ett AI-program kan förhandlas

Tre saker i ett program för röstassistenter är värda att reda ut före lanseringen i stället för efteråt, och alla tre skyddar ett påstående som ni marknadsför. Struktureringen av tjänstekostnader, per användning jämfört med per enhet, är värd att förhandla om i förväg, likaså löptiden jämfört med en rullande period och en lägstanivå jämfört med ett tak. Beteendet vid fel och utlösaren för textgranskning är förhandlingsbara designåtaganden. Antalet distinkta konfigurationer som ni åtar er att leverera är förhandlingsbart, och var och en har sin egen miniminivå per enhet och per språk. Minsta beställningskvantitet är förhandlingsbart. Förpacknings- och informationsmaterialets utformning, inklusive marknadsetiketter, informationen om prenumerationen och språket i dokumentationspaketet, är en förhandling med låg kostnad. Betalningspunkterna är en standardfråga: en deposition som tas emot vid beställningen, ett restbelopp vid godkännande före leverans och en kvarhållning tills dokumentationen är klar.

Tre poster ligger utanför någons kommersiella förhandlingsutrymme, och en av dem är avgiften för certifieringen i sig. Certifieringskostnaden och certifieringstiden är inte kommersiella förhandlingskort; avgiften gäller per produktfamilj och tidsåtgången fastställs av testlaboratoriet och granskningskön. Verktygskostnader är en engångskostnad som normalt amortiseras över den första beställningen, och de frågor som är värda att ställa gäller över vilken volym den amortiseras och vad som händer med verktygen om programmet avslutas. Den regulatoriska hanteringen är inte heller förhandlingsbar, eftersom den följer av funktionaliteten och formuleringarna, inte av priset.

Dokumenten som ska begäras innan depositionen betalas. Inferensarkitekturen, per funktion. Beteendet utan nätverk, specificerat punkt för punkt. Kommandolistan, aktiveringsordet, andelen falska aktiveringar och slutfördröjningen, med nätverkstillståndet angivet. Språklistan med riktningen för varje par. Dataflödet, operatörens juridiska person och jurisdiktionen för datalagring. Prenumerationsvillkoren, inklusive beteendet när prenumerationen löper ut och kostnaden per användare eller per enhet. Firmwareversionen och uppdateringsmekanismen.

Klausulerna som ska skrivas in i inköpsordern. En klausul som anger vad varje funktion gör när tjänsten inte är tillgänglig eller prenumerationen upphör. En klausul som kräver ett meddelande med en angiven period före ändringar av fast programvara eller modell som påverkar assistentens beteende. En klausul som kräver att integritetsförklaringen och dokumentationspaketet uppdateras när dataflödet ändras. En klausul som kräver att marknadsföringstexter och produktetiketter stämmer med tillverkarens angivna listan över funktioner. En klausul om vem som bär kostnaden när provet inte uppfyller acceptanskriterierna.

Exempel: ett varumärke inom fält service som lägger till en röstassistent

Detta är ett hypotetiskt scenario och inte ett klientprojekt. Det finns här för att visa beslutssekvensen.

Anta att ett europeiskt varumärke inom industriservice, som redan säljer en kamera till tekniker på driftplatser, överväger en röstassistent så att handsfri bildtagning inte kräver att tekniken tar fram telefonen. Teknikerna arbetar i maskinrum, på byggställningar och i fordon, ofta med handskar på. Varumärkets begränsning är att den nuvarande produktsidan redan innehåller ett påstående som företaget inte kan dokumentera, och varumärkets compliancechef har bett om att det ska ändras.

Steg ett: felanalysfrågorna. Varumärket ställer de tre frågorna till leverantören skriftligen. Svaret om offline-drift är delvis: bildtagning och uppspelning fortsätter, men assistenten gör det inte. Svaret om prenumerationen är att det inte finns någon prenumeration. Svaret om data anger en namngiven operatörsenhet i en angiven jurisdiktion med en angiven lagringstid. Två av de tre har entydiga svar, och offline-svaret beskriver en verklig försämring snarare än ett fullständigt funktionsbortfall.

Steg två: arbetsflödestestet. Istället för en demonstration kör varumärket ett scriptat test under de förhållanden som spelar roll: handskar, maskinrumsbuller och fordon. Två enheter av samma version används, eftersom varumärkets egna tekniker kan säga om aktiveringsfrekvensen fungerar när en hjälm används.

Steg tre: omfattningsbeslutet. Arbetsflödestestet visar att assistenten fungerar, men att falska aktiveringar i ett bullrigt maskinrum är så vanliga att den aktiveras under orelaterad samtal. Varumärkets slutsats är inte att funktionen ska utelämnas, utan att aktiveringsstrategin behöver ändras. Det är en fråga om fast programvara och hanteras därför före den första ordern, inte efteråt.

Steg fyra: påståendet. Texten beskriver bildtagning i första person med en röstassistent som fungerar där det finns nätverk, och anger uttryckligen försämringen i offline-läge. Det är ett snävare påstående än konkurrentens och ett som varumärkets compliancechef kan försvara, vilket samtidigt löser det äldre, odokumenterade påståendet.

Steg fem: den kommersiella strukturen. Varumärket anger offline-beteendet och meddelandeperioden i inköpsordern och förhandlar om minimi antal per konfiguration mot ett åtagande om totalt antal kombinationer, istället för mot ett antal enheter, eftersom aktiveringsstrategin kommer att testas på fler än en variant.

Resultatet är en funktion med en dokumenterad felmodus, ett snävt påstående och en ändring av fast programvara som gjordes före den första ordern istället för efter en återgångstrend. Det avgörande steget var det första: två av de tre felanalysfrågorna hade entydiga svar, och den tredje hade en försämring som kunde beskrivas, inte ett tomrum som inte kunde det.

Vad vår egen katalog kan och inte kan dokumentera

Här publicerar vi de AI-funktioner som vår dokumentation stöder och markerar resten som öppna. Vi vill hellre att en köpare tar bort ett påstående än att vi publicerar ett som vi inte kan försvara.

Vad vi publicerar: en AI-röstassistent som viktig teknik i hela kamerasegmentet – 8 MP-gruppen med V06 och CY03, V03 Pro och MT5, V03 och KY06 samt MT6 och CY05, samt 13 MP-gruppen med L1 Pro, L2 Utral och S7. AI-översättning för K01, som är en ljudmodell, så vi behandlar det som en iakttagelse från vårt eget marknadsföringsmaterial och inte som en publicerad specifikation. Den smarta bullerreduktionstekniken för Bluetooth-ljudfamiljen.

Vad vi inte publicerar och inte kommer att uppskatta: inferensarkitekturen, offline-beteendet, språklistan, latensen, precisionen, frekvensen av falska aktiveringar, prenumerationsstatusen, detaljerna om dataflödet och modellistan, för någon modell i sortimentet. Vi publicerar heller ingen verifierad enhetslista för assistenten och kommer inte att skapa en i efterhand utifrån minnet, eftersom en kompatibilitetslista bara är användbar om den är korrekt vid tidpunkten då den läses.

Vi kommer också att tillämpa samma regel på våra egna webbplatser. Om vi inte kan hämta ett påstående från tillverkaren markerar vi det som öppet i stället för att approximera det, och vi avböjer briefar som begär att vi ska positionera AI-funktioner på ett sätt som vi inte kan dokumentera.

De tre frågorna att skicka med i nästa underlag

Skicka de tre frågorna om fel som en lista, skriftligen, före offerten. Vad händer utan nätverk, vad händer när prenumerationen löper ut, samt vart datan skickas och hur länge den sparas. En leverantör som svarar på alla tre har en dokumentationsvana, och den vanan är värd mer än funktionen.

Skicka mätscriptet med underlaget, inte efter exemplet. De numrerade testerna, var och en med en angiven förutsättning och ett angivet godkänt resultat, samt instruktionen att testerna ska köras på minst två enheter av samma version, där nätverket saknas på en av dem.

Skicka arbetsflödet, marknaden och prisbandet till oss. Vi berättar vilka rader vår dokumentation täcker i dag, vilka som måste komma från tillverkaren och vilka som kräver ett test på era egna enheter. Kameraserien finns under AI-kameraglasögon, ljudserien under Bluetooth-ljudglasögon och bakgrunden under AI-funktioner.


Varifrån besluten kommer

Berätta vilket arbetsflöde ni har, så berättar vi vilka av de tre frågorna ni måste ställa innan ni kan publicera något.

Chatta på WhatsApp
Din upplevelse på denna webbplats kommer att förbättras genom att tillåta cookies.