Un test di campione ti dice se una funzionalità AI funziona. Un test graduale con utenti reali ti dice se qualcuno la usa, mentre un terzo test ti dice se esisterà ancora tra sei mesi — ed è proprio questo terzo test quello che l’acquirente acquista effettivamente. Un assistente sugli smart glasses è una dipendenza, non un componente: il modello viene eseguito da qualche parte, qualcuno gestisce il servizio e un cliente che ha utilizzato la funzionalità per due settimane la scopre in un modo che un acquirente non scoprirà mai. Il programma deve quindi rispondere, in ordine, a tre domande — cosa accade quando il servizio non è disponibile, con quale frequenza persone reali ricorrono alla funzionalità e se è ancora disponibile un anno dopo — e le risposte devono diventare clausole contrattuali, perché la terza domanda non è un rischio tecnico, ma commerciale. Non pubblichiamo alcuna wake rate, false activation rate, command success rate, latenza, precisione del riconoscimento o comportamento offline per alcun modello e non stimiamo questi valori.
Funzionalità IA degli occhiali smart: cosa fallisce e quando
La differenza tra una dimostrazione e la prima settimana di un cliente
Il nostro catalogo indica un assistente vocale AI tra le tecnologie chiave della gamma di occhiali con fotocamera AI e il nostro sito indipendente descrive la traduzione AI sul K01, che è un modello audio. Queste sono le due affermazioni di cui possiamo fornire prove. Tutto il resto in questa categoria — la wake rate, la false activation rate, la command success rate, la latenza, la precisione del riconoscimento, il comportamento offline — non è pubblicato per alcun modello e non lo stimiamo.
Questa lacuna esiste per una ragione, e quella ragione plasma l’intero approccio all’acquisto. Il comportamento di un assistente è generato dal modello e dal servizio alle sue spalle anziché dalla fabbrica, pertanto un numero che lo descrive appartiene a chi gestisce quel servizio. Una fabbrica può indicare cosa fa il proprio firmware con il risultato e può descrivere il comportamento di un’unità spedita quando il risultato non arriva mai. Non può invece promettere cosa farà il modello il mese prossimo, perché non spetta a lei modificarlo.
La conseguenza strutturale è che una dimostrazione e la prima settimana di un cliente sono eventi diversi. Un’unità da dimostrazione ha gli account collegati, la lingua impostata, la regione configurata, una rete nota come funzionante e qualcuno nella stanza che sa cosa fare in caso di problemi. L’unità pronta all’uso è invece ciò che riceve il cliente, ed è proprio nella differenza tra questi due stati che emergono la maggior parte dei rilievi.
Il lettore è un product manager di un brand, un acquirente di sourcing o un acquirente di canale che deve decidere se un assistente AI sia una funzionalità di primo piano o una voce di listino, e che ha a disposizione campioni, un prezzo obiettivo, un canale e un elenco di funzionalità. Il rischio da gestire è un lancio in cui la funzionalità viene annunciata, non regge il contatto con una famiglia reale e si trasforma in una responsabilità di rimborso e in un problema di recensioni anziché in un ticket tecnico.
Cosa cerca di evitare un acquirente
Spedire una funzionalità che i clienti smettono di usare. Una funzionalità utilizzata meno nella seconda settimana rispetto alla prima ti dice qualcosa di importante, anche se ogni singolo test è stato superato. Un prodotto venduto sulla base di una funzionalità che nessuno utilizza è un prodotto con una responsabilità di rimborso e un problema di recensioni.
Un annuncio che afferma che la funzionalità funziona senza connessione, quando non è vero. La fase in condizioni non corrette determina se il fallimento è gestibile ed è la fase che determina ciò che l’annuncio può affermare.
Un risultato che favorsce il prodotto perché il tester era coinvolto. Un collega interessato al risultato.utilizzerà correttamente la funzionalità, ma utilizzarla correttamente non equivale ad averne bisogno.
Una dipendenza di cui il brand non è a conoscenza. È l’unica esclusiva di questa categoria. Ogni altra funzionalità del prodotto è realizzata da qualcuno con cui l’acquirente ha stipulato un contratto. Questa potrebbe non esserlo e, se l’acquirente non ha posto la domanda, la risposta predefinita è: il servizio è gestito da qualcun altro e può essere modificato o ritirato da qualcuno che il brand non ha mai incontrato.

Il compito dell’acquirente: decidere cosa accade quando il servizio non è disponibile
Chi gestisce il servizio dietro la funzionalità
Prima di misurare qualsiasi cosa, il brand deve stabilire la proprietà della funzionalità, perché la proprietà determina la struttura commerciale dell’intero programma ed è l’elemento più difficile da modificare in seguito.
Tre domande chiariscono la questione. Il modello viene eseguito sul dispositivo o su un server? Chi gestisce il server, se si tratta di un server? E cosa accade alla funzionalità se il gestore cambia i prezzi, il modello o la propria decisione di continuare a supportare il prodotto?
Non sono curiosità tecniche. Un assistente eseguito sul dispositivo ha un ciclo di vita legato al prodotto e un comportamento controllato dal produttore, il che ne fa un problema di specifiche. Un assistente eseguito su un server ha un comportamento che il produttore non controlla, il che ne fa un problema della catena di fornitura: il brand sta negoziando con due controparti anziché con una. La distinzione determina il costo totale del programma, la struttura contrattuale e se la funzionalità può essere descritta onestamente nell’annuncio come qualcosa che il prodotto fa.
La seconda questione da chiarire è a cosa il brand ha diritto di sapere in caso di modifiche. Una funzionalità che può essere cambiata senza preavviso contrattuale al brand comporta un’esposizione commerciale maggiore della differenza di prezzo unitario, perché il brand ha impegnato packaging, testi, formazione e script di assistenza a un comportamento che non controlla. Un obbligo di preavviso, accompagnato da un periodo stabilito, trasforma questa esposizione in una gestibile.
La terza questione è cosa accade quando il servizio viene ritirato. In pratica esiste sempre una risposta, ed è solitamente che la funzionalità smette di esistere per i clienti che hanno già pagato un prodotto pubblicizzato come dotato di tale funzionalità. La clausola che indica uno stato di fallback — un comportamento offline, un insieme ridotto di comandi, una soluzione locale — vale più di qualsiasi funzionalità offerta dal servizio, perché è l’unica parte che il brand può garantire.
La matrice qui sopra affianca le due dimensioni che contano. La cella in basso a destra rappresenta la posizione più forte che un brand può raggiungere, ed è ottenibile tramite un contratto anziché mediante la tecnologia. La cella in alto a sinistra è la posizione più comune in questa categoria, e la sua mitigazione non è un modello migliore, bensì uno stato di fallback e un periodo di preavviso.
I quattro stati di degrado e le relative soglie
I quattro stati e la clausola richiesta da ciascuno
L’assistente non si trova in un’unica condizione, ma in quattro, ciascuna delle quali impone un obbligo diverso ai testi del brand e una clausola diversa al contratto.
Connesso e funzionante. Il comando viene compreso e riceve una risposta. L’obbligo qui è il minimo: il insieme di dichiarazioni può includere la capacità, purché l’elenco delle capacità ne indichi le condizioni. «Comprende il linguaggio naturale» diventa «riconosce un comando tra quaranta frasi, in un ambiente con un livello di rumore specificato, su una versione di firmware specificata»: una dichiarazione circostanziata anziché una capacità.
Connesso ma degradato. Una risposta più lenta, parziale oppure un rifiuto. È lo stato di cui nessuno scrive e che tutti sperimentano, ed è quello in cui la promessa nei testi viene solitamente a meno. La soglia da rispettare è una descrizione scritta del comportamento degradato, redatta dal fornitore anziché dal brand, perché il brand non può descriverlo accuratamente dall’esterno. Un annuncio che promette un tempo di risposta è una dichiarazione relativa allo stato degradato, non a quello funzionante.
Nessuna rete. Un rifiuto locale, una coda oppure il silenzio. La soglia è che il comportamento sia specificato e che la specifica sia visibile al cliente sia nell’annuncio sia nel volantino. Un dispositivo che fallisce in silenzio in un ascensore genera una richiesta di assistenza; un dispositivo che spiega cosa sta facendo offre una funzionalità.
Servizio ritirato. La funzionalità smette di esistere per il cliente. La soglia è contrattuale: un periodo di preavviso, uno stato di fallback definito e il prezzo al quale il brand può richiedere che il servizio rimanga attivo. Questa è la riga che un brand firma e un cliente scopre, ed è l’unica che sopravvive alla settimana di lancio.
Una disciplina utile per tutti e quattro gli stati consiste nel scrivere i testi in funzione dello stato peggiore che si può raggiungere, anziché di quello migliore che si può dimostrare. Un annuncio che regge nello stato senza rete e nello stato degradato reggerà automaticamente anche nello stato funzionante; il contrario non è vero.
Le domande da formulare per iscritto prima del versamento dell’acconto
I tre gruppi di questo elenco sono organizzati in base a ciò che decidono, non a chi li fornisce. Il gruppo sulla proprietà decide la struttura commerciale del programma ed è quello che deve essere chiuso prima che il contratto venga redatto. Il gruppo sulla continuità decide il rischio ed è quello che determina se il brand può dormire tranquillo dopo il lancio. Il gruppo sui dati decide cosa può dichiarare l’informativa sulla privacy ed è quello su cui un mercato con proprie regole sui dati chiederà chiarimenti. In totale sono nove voci e le domande da porre sono le stesse per ogni candidato: è questo che rende equo il confronto tra loro.
- Chi gestisce il servizio dietro l’assistente: la fabbrica, l’operatore dell’app o una terza parte.
- Se il modello viene eseguito sul dispositivo o su un server e cosa può fare il dispositivo senza di esso.
- L’elenco scritto delle funzionalità, con ogni voce e la condizione a cui si applica.
- L’elenco delle lingue supportate, con la direzione di ogni coppia se viene dichiarata la traduzione.
- La descrizione dei dati: cosa viene raccolto, dove viene elaborato e come si disattiva il microfono.
- Il meccanismo di aggiornamento e per quanto tempo restano disponibili le build del firmware.
- L’avviso che il brand riceve prima di una modifica al modello o al comportamento.
- Il comportamento in caso di ritiro del servizio, messo per iscritto.
- I numeri dei certificati, con l’ente emittente e le rispettive date di validità.

Creare un programma di due settimane che produca prove di adozione
Le sei fasi e il registro che generano
Il programma si svolge nell’arco di due settimane con persone che non hanno alcun interesse per il risultato, e da esso emergono i due numeri che contano: il tasso di utilizzo e la distribuzione delle modalità di errore.
La prima fase è il primo utilizzo senza assistenza. Una persona, un’unità, appena uscita dalla confezione, su un telefono con cui non è mai stata associata. Osservare senza intervenire. Questa fase rileva i problemi di configurazione che un test del campione non coglie: la lingua non è impostata, l’account non è collegato, la regione è sbagliata, manca un’autorizzazione e il primo tentativo fallisce per un motivo che non ha nulla a che fare con la funzionalità.
La seconda fase è il primo giorno nella routine abituale della persona. La funzionalità è stata usata una volta, tre volte o mai? Chiedere la mattina seguente anziché sul momento, perché la risposta immediata è contaminata dall’effetto della dimostrazione.
La terza fase è la prima settimana con cinque persone, ciascuna con i propri dispositivi, account e reti. A questo punto emerge la variabilità. Alcune saranno in un luogo rumoroso, alcune avranno un accento, una avrà un telefono datato. Una funzionalità che funziona per quattro persone su cinque è una funzionalità che farà generare un reso alla quinta.
La quarta fase prevede condizioni avverse introdotte deliberatamente. Un caffè rumoroso, un segnale debole, una stanza buia, un telefono con la batteria scarica. È qui che diventano visibili il tasso di attivazione indesiderata e la latenza, ed è la fase che una dimostrazione non raggiunge mai.
La quinta fase prevede condizioni non idonee. Il dispositivo senza rete e quello con l’account perso. La domanda è se l’errore viene gestito in modo controllato: la risposta determinerà ciò che potrà dichiarare la scheda prodotto.
La sesta fase è la seconda settimana. Rivolgerse di nuovo alle stesse cinque persone. La domanda è se il comportamento è cambiato.
Il registro contiene cinque campi e nient’altro: la persona, il dispositivo, la build del firmware, la condizione e il risultato. Il tasso di utilizzo e la distribuzione delle modalità di errore derivano quindi dal registro, anziché essere ricordati a memoria. Il numero della build è la colonna che viene omessa, ma è quella che permette di confrontare la seconda settimana con la prima, o un ticket di assistenza a tre mesi di distanza con il risultato annotato.
Le soglie da mantenere
Il tasso di utilizzo è il numero che predice se la funzionalità è importante. Quante volte una persona reale ci ha fatto ricorso in un giorno. Una funzionalità che un tester motivato usa venti volte in un’ora e una persona normale usa due volte al giorno è diversa, ed è il secondo numero a contare.
La distribuzione delle modalità di errore conta più del numero di errori. Non quanti errori si sono verificati, ma di che tipo. Una funzionalità che fallisce silenziosamente in una stanza rumorosa richiede una soluzione diversa da una che fallisce lentamente su una rete debole, e le due soluzioni sono di responsabilità di persone diverse.
Un elenco di funzionalità senza condizioni è soltanto un elenco di intenzioni. La soglia da mantenere è che ogni funzionalità arrivi insieme a un numero, una condizione e una dimensione del campione, oppure non arrivi affatto.
L’identificativo della build deve essere registrato per ogni risultato. È ciò che rende confrontabile, tre mesi dopo, un caso di assistenza con un numero annotato in una sala prove, ed è il campo più economico da registrare e il più costoso da ricostruire.
La descrizione dei dati è un fatto commerciale, non un dettaglio tecnico. Determina chi gestisce il servizio, cosa può dichiarare l’informativa sulla privacy e cosa accade in un mercato con proprie regole sui dati. Un brand che non riesce a descrivere dove finiscono i dati non può scrivere la pagina sulla privacy, e un brand che non riesce a scrivere la pagina sulla privacy non può lanciare il prodotto.

Dove un programma di funzionalità AI si interrompe dopo il lancio
La funzionalità viene annunciata in una scheda prodotto e nessuno la usa. La causa è che il programma si è fermato in laboratorio, dove tutto funziona perché chi testa è motivato. La soluzione preventiva è portare avanti il test fino alla seconda settimana e considerare il tasso di utilizzo una condizione per i testi, anziché una statistica da riportare in seguito.
Il malfunzionamento iniziale viene liquidato come un bug del firmware. La causa è che, nella maggior parte dei casi, si trattava di una configurazione, di una lingua, di un account, di un’autorizzazione o di un passaggio mancante nel manuale. La soluzione preventiva è confrontare la guida rapida con i risultati del primo avvio, perché la correzione è spesso un paragrafo anziché una nuova versione del firmware.
La scheda prodotto afferma che la funzionalità funziona senza connessione. La causa è che la fase in condizioni non idonee è stata saltata, oppure che il malfunzionamento non è stato gestito in modo controllato. La soluzione preventiva è eseguire questa fase e fare in modo che la scheda descriva ciò che l’utente vede realmente.
Il servizio cambia e il prodotto non corrisponde più alla confezione. La causa è che non esisteva alcun obbligo di preavviso, quindi la modifica è arrivata come una sorpresa sia per il brand sia per ogni cliente che aveva letto i testi precedenti. La soluzione preventiva è stabilire il periodo di preavviso come una clausola contrattuale e includere una revisione dei testi nella procedura di modifica.
Il team di assistenza non riesce a rispondere a una domanda sulla funzionalità. La causa è che l’elenco delle capacità è stato redatto come una serie di intenzioni e nessun risultato è mai stato registrato in una forma che il team di assistenza potesse citare. La soluzione preventiva è fornire al team di assistenza l’elenco delle capacità con le relative condizioni e le build del firmware: si tratta di un documento, non di una riunione.
Un cliente segnala che la funzionalità ha funzionato e poi ha smesso di funzionare. La causa è che il servizio è cambiato, oppure che l’account è scaduto o che la build è stata abbandonata. La soluzione preventiva è una dichiarazione scritta delle azioni che il cliente deve intraprendere, che in pratica significa dirgli la verità sulla soluzione alternativa nel opuscolo, anziché in una risposta di assistenza.
Un esempio pratico: un brand che decide se l’assistente debba essere una caratteristica di primo piano
Questo è un caso ipotetico, non un ordine in corso. Serve a definire il processo.
Supponiamo che un brand di elettronica di consumo stia valutando una linea di occhiali con fotocamera AI per un mercato generalista, con due piattaforme candidate e una scheda prodotto da scrivere in sei settimane. Il vincolo determinante non è il prezzo, ma il fatto che il lancio precedente del brand avesse una funzionalità che smetteva di funzionare per alcuni clienti, per i quali il team di assistenza del brand non aveva una risposta.
La questione della responsabilità viene prima, prima ancora di confrontare le due piattaforme. Il brand pone due domande: dove viene eseguito il modello e chi gestisce il servizio. Una delle piattaforme candidate viene eseguita sul dispositivo e il brand può descriverne il comportamento. L’altra viene eseguita tramite un servizio con cui il brand non ha stipulato un contratto, e la risposta del fornitore include un periodo di preavviso e uno stato alternativo scritto. Questa risposta cambia completamente il confronto: la prima piattaforma presenta un rischio tecnico gestibile dal brand, mentre la seconda presenta un rischio di dipendenza che il brand può soltanto mascherare.
I quattro stati sono definiti nel contratto prima che vengano scritti i testi. Funzionante, degradato, assenza di rete e sospeso. Per la seconda piattaforma, il fornitore fornisce per iscritto la descrizione dello stato degradato e dello stato alternativo, mentre il brand concorda la formulazione relativa al comportamento in assenza di rete. I testi vengono quindi scritti rispetto allo stato peggiore: una scheda prodotto più lenta e meno accattivante, ma che resiste.
Il programma a fasi viene svolto su unità appena uscite dalla confezione. Il primo avvio con un nuovo telefono rileva due problemi di configurazione che sarebbero rimasti invisibili su un’unità già preparata. La prima settimana con cinque persone rivela un problema di account e un malfunzionamento in una rete debole. La seconda settimana produce un tasso di utilizzo modesto e il brand decide che la funzionalità sia una voce secondaria anziché una caratteristica di primo piano.
Il testo viene adattato di conseguenza. Poiché il tasso di utilizzo è modesto, la funzionalità viene descritta nel secondo paragrafo della scheda prodotto anziché nel titolo, e lo script di assistenza e il volantino sono redatti in modo coerente. Il brand accetta una dichiarazione più contenuta ed elimina il rischio di lancio.
La struttura commerciale segue la responsabilità. Per la piattaforma con cui il brand può stipulare un contratto, il brand negozia il periodo di preavviso e la conservazione della build e richiede un secondo round di campioni, così da verificare lo stato di fallback su un’unità di produzione. Per la piattaforma con cui non può stipulare un contratto, il brand richiede come condizione un fallback lato dispositivo e, in caso di risposta negativa, esclude il candidato.
Il risultato è una linea di prodotti con una dichiarazione contenuta, un fallback documentato e un team di assistenza in grado di rispondere alla domanda. La decisione determinante è stata quella sulla responsabilità, ed è stata presa prima che il testo venisse redatto.
Dove il programma AI perde il suo margine
Il packaging e il testo sono vincolati a un comportamento che il brand non controlla. Questa è la maggiore esposizione singola della categoria e non è visibile in alcuna quotazione. La mitigazione è un periodo di preavviso e una clausola di revisione, entrambe prive di costi per il fornitore se non ha nulla da nascondere.
Lo stato di fallback non viene implementato, quindi il comportamento in assenza di rete dipende da ciò che il firmware fa di sua spontanea volontà. Il costo di questo aspetto emerge nella casella di posta dell’assistenza anziché nel lancio, il che lo rende più difficile da correggere e più oneroso da sostenere. Implementare il fallback nei criteri di accettazione prima del primo articolo ha un costo contenuto.
La conservazione della build è breve. Una build ritirata sei mesi dopo il lancio significa che le unità già sul campo non possono essere riprodotte, e un prodotto non riproducibile è un prodotto il cui secondo ordine è diverso. Il periodo di conservazione della build è una condizione che merita di essere negoziata con fermezza, ed è spesso silenziosamente breve.
Il tasso di utilizzo non viene mai misurato, quindi il testo si basa sulla dimostrazione anziché sulle prove. Il compromesso che un acquirente dovrebbe fare in modo consapevole è tra un programma più breve e una dichiarazione corretta. Un programma di due settimane costa due settimane; una scheda prodotto che esagera la funzionalità costa l’intera produzione.
La dichiarazione sulla traduzione viene presentata senza indicare una direzione. Una coppia linguistica che funziona in una direzione e non nell’altra è una dichiarazione che fallisce esattamente nel mercato che il brand intendeva raggiungere. L’elenco delle lingue supportate con la direzione di ogni coppia è una richiesta di una sola riga che previene il fallimento mercato per mercato.
Cosa pubblichiamo sull’assistente e cosa non stimeremo
La regola operativa che applichiamo: preferiamo che un acquirente esegua il programma piuttosto che si fidi di una dimostrazione; sosteniamo il test invece di presentare un risultato.
Pubblichiamo le capacità AI supportate dalla nostra documentazione e contrassegniamo le altre come non ancora verificate. Non pubblichiamo alcun tasso di attivazione vocale, tasso di attivazione errata, tasso di successo dei comandi, latenza, precisione del riconoscimento, precisione della traduzione o comportamento offline per alcun modello, e non stimiamo nessuno di questi valori. Ciò significa che le sei fasi descritte sopra sono l’unico modo in cui questi numeri possono venire elaborati, e preferiamo contribuire a produrli piuttosto che citare dati che non possiamo supportare.
Saremo inoltre diretti su quali rilievi possiamo recepire. Una configurazione, una lingua, un account, un’autorizzazione o un passaggio mancante nel manuale sono di nostra competenza, e la correzione consiste di solito in un paragrafo della guida introduttiva. Un comportamento del modello, un profilo di latenza o un’architettura del servizio riguardano l’app e il firmware; vi chiariremo quale sia l’uno e quale l’altro prima che costruiate su tali presupposti un piano di lancio.
Quello che faremo è aiutarvi a progettare le sei fasi, concordare cosa verrà registrato, fornire unità con una build nota e riportare i risultati, compresi quelli sfavorevoli, perché una funzionalità che supera la seconda settimana vale più di una dimostrazione che sopravvive a una fiera di settore. I principi di base sono illustrati in funzionalità AI degli occhiali, il protocollo di laboratorio standardizzato si trova in come misurare le funzionalità AI, il piano di preordine è disponibile in come testare le funzionalità AI prima dell’ordine e gli errori da evitare nelle dichiarazioni sono raccolti in errori comuni relativi all’AI.
Quattro azioni prima che l’assistente compaia in una scheda prodotto
Ponete per iscritto le domande sulla responsabilità. Se il modello viene eseguito sul dispositivo o su un server, chi gestisce il servizio e cosa viene comunicato al brand prima che il servizio cambi. Le risposte a queste tre domande determinano la struttura commerciale del programma e sono più economiche da ottenere ora che da rinegoziare dopo la stampa del testo.
Invia l’elenco di richieste a nove righe a ogni candidato. Le domande da porre sono identiche per tutti, così il confronto è equo e le risposte sono confrontabili.
Inserisci i quattro stati di degrado nei criteri di accettazione. Funzionante, degradato, nessuna rete, revocato. Il testo è scritto tenendo conto del caso peggiore, ed è proprio questo testo che resiste.
Inviaci la funzionalità che intendi pubblicare. Progetteremo con te le sei fasi, ti indicheremo quali misurazioni sono decisive per il tuo canale e riporteremo i risultati, compresi quelli poco lusinghieri.
Letture correlate
- Il protocollo scriptato su un campione — come misurare le funzionalità IA
- Il piano di preordine — come testare le funzionalità IA prima di ordinare
- Gli errori da evitare nelle dichiarazioni — errori comuni dell’IA
Indicaci la funzionalità che intendi pubblicare e progetteremo con te le sei fasi.



