En ODM-utvecklingspilot är lätt att beställa men svår att specificera, och det är i gapet mellan dessa två tillstånd som de flesta pilotprogram spenderar pengar utan att få information. En köpare beställer tjugo enheter, får tjugo enheter och upptäcker sedan att dessa tjugo enheter inte kan besvara den fråga som motiverade dem. Orsaken är sällan att en fabrik vägrar hjälpa till. Det beror på att piloten specificerades som en kvantitet när den borde ha specificerats som ett beslut.
En pilot besvarar en enda fråga. Vilken fråga det blir beror på vad som ännu inte fastställts, och inom den här kategorin är det framför allt de uppgifter som den publicerade datan inte innehåller: ramvikten för något annat än en enda modell, sensormodellen, synfältet, videospecifikationen, mikrofonvärdena, linsprestandet, ingressrapportens nummer och tätningsmaterialet publiceras inte alls i vår katalog. Katalogen innehåller ingen certifieringsrad för någon modell och inget certifikatnummer, så den omfattning som gäller för en viss modell på en viss marknad är dokument som måste begäras och arkiveras före beställningen, inte något en köpare kan läsa av på en sida. En ODM-utvecklingspilot är därför inte en formalitet före produktion. Den är mekanismen genom vilken en specifikation upphör att vara en beskrivning och blir något som en beställning, en garantiklausul och en överensstämmelsemapp alla kan grundas på.
ODM-utvecklingspilot: tre piloter som förväxlas med varandra
Det vanligaste specificeringsfelet inom den här kategorin är att behandla en pilot som en enda aktivitet. Det är tre, med olika kvantiteter, olika acceptansgrunder och olika resultat, och ett program som kör den ena när det behövde den andra tappar både tid och pengar.
Processpiloten är en kort körning vars syfte är att ta reda på om produktionslinjen kan hålla toleranserna och om standarden för första artikeln är uppnåbar. Resultatet är en yield-siffra och en lista över defekter. Acceptansgrunden är enheternas enhetlighet, inte produktens prestanda. En processpilot som återkommer utan avvikelser visar att linjen är kapabel, men den säger ingenting om huruvida designen uppfyller kraven, eftersom kraven aldrig testades mot den. Det är piloten som upptäcker tillverkningsproblem, och det är den som de flesta fabriker är organiserade för att kunna köra snabbt.
Utvärderingspiloten är en kort körning vars syfte är att framställa enheter mot vilka köparens egna acceptanskriterier kan mätas. Resultatet är underlag: en viktfördelning över ett urval, en kamerautvärdering vid angivna förhållanden, en storleksgenomgång, en akustisk mätning och ett omprov av inträngningsskydd. Acceptansgrunden är kriterier som köparen själv har formulerat, eftersom den publicerade datan inte innehåller dem. Det är piloten som täcker specificeringsluckorna, och inom den här kategorin är det piloten som faktiskt spelar roll, eftersom risken ligger i luckorna.
Fältpiloten är en liten körning som placeras i kundens verkliga miljö med verkliga användare. Resultatet är beteendedata: en returfrekvens under en period, ett interaktionsmönster, en veckas verklig användning i ett klassrum, ett lager eller en butikslokal. Acceptansgrunden är vad som händer vid användning, inte vad en bänk rapporterar. Det är piloten som de flesta program hoppar över, och den är den enda som kan visa om produkten löser problemet, till skillnad från att den följer en specifikation som köparen själv har skrivit.
De tre är sekventiella i ett välkört program och oberoende av varandra i ett dåligt kört program. Ett vanligt fel är att köra processpiloten, vara nöjd med yield-siffran och behandla resultatet som om det vore utvärderingspilotens. De två svaren är inte utbytbara, och en köpare som godkänner det ena som det andra har inte täppt någon lucka alls.
Kostnaden för den förvirringen är inte abstrakt. En processpilot är billig, snabb och bekväm, eftersom dess kriterier ligger internt hos fabriken och resultatet vanligen är gynnsamt. En utvärderingspilot är långsammare och mer sannolik att ge ett obehagligt svar, eftersom dess kriterier tillhör köparen och dess mätinstrument kanske inte är de som fabriken normalt använder. Program drar mot den första typen av just den anledningen och upptäcker sedan vid granskningen före produktion att specifieringsfrågorna fortfarande är öppna samtidigt som formgivningen redan är beställd. Att bestämma vilken pilot en fråga kräver, innan någon bygger något, är den billigaste timmen i hela programmet.

Välj den pilot som din öppna fråga faktiskt kräver
Valet är enklare än program gör det, eftersom frågan nästan alltid redan är formulerad någonstans i köparens egen dokumentation. Börja med acceptanskriterierna, inte med antalet enheter.
Steg ett: skriv den öppna frågan i en mening. Om den inte kan formuleras i en enda mening bär pilotprojektet fler än en fråga och kommer inte att besvara någon av dem. "Är batterikapaciteten tillräcklig?" är en fråga. "Är batteriet, kameran och ljudet rätt?" är tre frågor med tre olika provkonstruktioner och tre olika konsekvenser vid fel.
Steg två: klassificera varje kriterium efter bevisstatus. Publicerad data är redan fastställd och kräver ingen pilot. Data som påstås men inte styrks av bevis kräver en pilot. Data som ingen har uppgett kräver först ett skriftligt kriterium, eftersom det finns inget att testa mot. I vår egen katalog är den mellersta kolumnen lång: ljudprestanda, linsprestanda, bevis för inträngsskydd och kameraspecifikation har alla påståtts eller antydda i stället för publicerade.
Steg tre: avgör om frågan kan besvaras i en laboratoriemiljö. Vikt, mått, laddtid, gränssnittsfunktionalitet och inträngsskydd är frågor för laboratorietest. Anpassning till olika huvudformer är en fråga som kräver både laboratorium och panel. Trötthet på påminnelser, ljudmiljö med verkligt bakgrundsljud, en lång arbetssession och återlämningstid är frågor för fälttest och kan inte pressas in i ett laboratorieschema, oavsett vad leverantören är villig att försöka.
Steg fyra: fastställ antalet enheter utifrån påståendet, inte ett rundt tal. En viktspridning över enheter från mer än en tillverkningsbatch kräver tillräckligt många enheter för att spridningen ska synas. En kamera jämförelse mellan två konfigurationer kräver ett litet antal enheter, men samma konfiguration måste användas på båda sidor. En klass eller en plats kräver en klass eller en plats. Runda tal som tio eller tjugo har nästan alltid härlett från en budget i stället för från ett påstående, och de är den vanligaste anledningen till att ett pilotresultat senare förklaras bort.
Steg fem: bestäm i förväg vad som händer om testet misslyckas. En pilot utan definierade konsekvenser vid fel ger ett pilotprojekt som tolkas. Det är inte en kritik mot fabriken; det är vad som händer med alla resultat som kommer utan en bifogad tröskel. Konsekvensen bör skrivas ned innan enheterna byggs, eftersom köparen efterårt är kommersiellt bunden till ena sidan av svaret.
Det finns ett sjätte steg som erfarna köpare lägger till och som de flesta leverantörer inte efterfrågar, nämligen att ange varifrån pilotenheterna fysiskt kommer i schemat. En pilot som tas från en förproduktionsuppbyggning konkurrerar om samma dagar som formverktyg, fast programvara och dokumentationsarbete. En pilot som tas från den första produktionsbatchen konkurrerar inte med något annat, men kommer senare och kan inte påverka designen. Den avvägningen är ett programbeslut, inte ett fabriksbeslut, och hör hemma i offerten snarare än i det första mejlet efter att köpeordern har undertecknats. Om en pilot är inplanerad mellan designfrysning och bedömning av regelöverensstämmelse,.Expectera att dokumentationen ligger på den kritiska vägen snarare än tillverkningen, och fråga vilken av de två som faktiskt styr datumet.
Skriv pilotprotokollet innan enheterna byggs
Protokollet är det dokument som gör en testomgång till bevis. Sex element bör ingå, och ett program som skriver dem före tillverkningen får ett resultat som kan citeras; ett program som skriver dem i efterhand får en historia.
Kriterierna, numeriska och med tröskelvärden. "Batteriet fungerar acceptabelt" kan inte misslyckas. "Uppmätt körtid ligger inom den publicerade siffran vid angiven arbetsbelastning, mätt på enheter från den bedömda konfigurationen" kan göra det. Varje parameter i specifikationen som inte styrks av bevis bör finnas med som en rad i den här tabellen, med en metod, ett tröskelvärde och ett beslut.
Regeln för urval av enheter. Vilka batcher, vilka positioner i batchen, vilken konfiguration. Enheter från en enda körning i slutet av en lång tillverkning är det svagaste möjliga prov, eftersom de delar allt som varierar från batch till batch. Om pilotens syfte är att påvisa processförmåga är det precis det prov du vill ha; om syftet är att karakterisera produkten är det precis det prov du inte vill ha.
Mätmetoden och mätinstrumentet. Två team kan få olika värden från samma enheter och ha rätt båda, eftersom det ena teamet mätte efter en uppvärmningscykel och det andra mätte från kallt. Metoden hör hemma i protokollet, inklusive förberedande behandling, arbetsbelastning, omgivningsförhållanden och antal repetitioner.
Konditionering förtjänar en egen rad eftersom det är där tvister om mätningar vanligtvis avgörs. Ett resultat som rör batteriet beror på hur länge enheten har varit igång, vad den har gjort och hur länge den vilade innan mätningen påbörjades. Ett resultat för yttemperatur beror på omgivningsförhållandena och på hur länge arbetslasten har körts. Ett akustiskt resultat beror på miljön där det mäts, och en öppen bänk är inte samma miljö som en gata. Inget av detta är ovanliga krav; det är bara detaljer som avgörs av den som mäter först, och de bör avgöras av protokollet i stället. När ett värde ska tas med i en teknisk dokumentation ska även instrumentets identifikation registreras, eftersom en mätning som inte kan spåras inte utgör bevis i en due diligence-granskning, även om den är korrekt.
Provstorleken, med den angivna motiveringen. Inte ”20 enheter” utan ”20 enheter, eftersom påståendet avser en spridning inom en batch och en spridning kräver mer än en enhet per position”. Att ange motiveringen gör att antalet kan försvaras när resultatet ifrågasätts, och det blir uppenbart när antalet har ärvts i stället för att härledas.
Grunddata, inte en sammanfattning. En pilotrapport som anger ett enda värde utan spridningen är en sammanfattning, och sammanfattningar är platser där gynnsamma mätvärden överlever medan ogynnsamma inte gör det. Begär värdena för varje enskild enhet.
Åtagandet om rapportering. Vad leverantören åtar sig att göra med ett resultat som inte når tröskelvärdet: stoppa, justera och köra om, rapportera och fortsätta, eller rapportera och avvakta. I vår egen verksamhet kommer vi att genomföra en pilot enligt skriftliga kriterier och rapportera resultatet oförändrat, även när den ärliga slutsatsen är att de publicerade uppgifterna fortfarande är den bästa beskrivningen av produkten efter testningen.

Vad en pilotkörning inte kan fastställa inom denna kategori
En pilot är ett avgränsat projekt, och den dyraste missförståelsen inom denna kategori är att behandla den som ett fullständigt projekt. Fyra saker som den inte kommer att göra, oavsett hur många enheter den producerar.
Den kommer inte att visa produktionskonsekvens i volym. En pilot visar att processen kan åstadkomma något. Volymförmåga framgår av körning i produktionstakt, kapacitetsdata under en längre period och en kontrollplan, inget av vilket en kort körning kan ge. En pilot med tjugo enheter är en indikation och inget annat, och en leverantör som presenterar en pilotavkastning som produktionsavkastning lämnar ett påstående som uppgifterna inte stödjer.
Den kommer inte att visa produktens beteende under dess livstid. Batteridegradation, åldrande tätningar, slitage i gångjärnen, batteriets cykeldrift och utmattning i bågen är alla tidsberoende. En pilot som mäts under den andra veckan säger ingenting om den fyrtionde. När hållbarheten är viktig krävs ett separat program med egen tidsplan, och det bör startas tidigt just på grund av att det är långsamt.
Den kommer inte att lösa dokumentationsläget. En teknisk dokumentation, en försäkran om överensstämmelse och certifieringsläget är beroende av dokumentation, inte av testning. En pilot kan ta fram mätningar som stödjer dokumentationen; den kan inte skapa dokumentationen. Katalogen publicerar ingen certifieringsrad för någon modell, så en pilot har ingen grund att utgå ifrån i den frågan, och ingen pilotkörning kan ändra vad som saknas. Endast ett dokument som har lämnats in mot en angiven modellbeteckning och en angiven marknad kan göra det.
Den kommer inte att berätta om marknaden vill ha produkten. En pilot kan visa att enheten uppfyller kraven, fungerar och överlever körningen. Efterfrågan fastställs genom ett kommersiellt test med annan struktur, annan kostnad och annan riskbild, och att blanda de båda i ett program innebär oftast att den kommersiella frågan besvaras av det tekniska svaret.
Det finns ytterligare en begränsning som är specifik för denna kategori, och den bör anges direkt. En pilot som byggs av enheter från förproduktion och testas mot kriterier för förproduktion kommer att återskapa de luckor som den utformades för att stänga, eftersom enheterna själva byggs utifrån samma obevisade antaganden som specifikationen. Det är inte ett skäl att hoppa över piloten. Det är ett skäl att fastställa modellkoden och den bedömda konfigurationen före körningen, så att resultatet beskriver den konfiguration som faktiskt kommer att levereras.
Och det finns en sjätte, som är den som oftast upptäcks sent. En pilot visar enheterna framför den. Om en komponent byts ut efter piloten — för att originalet inte längre är tillgängligt, för att en leverantör ändrar sin specifikation eller för att en alternativ leverantör godkänns av kostnadsskäl — beskriver pilotens resultat en produkt som inte längre finns, och luckan öppnas i tysthet. Därför bör en ändringskontrollregel finnas i pilotavtalet snarare än i den allmänna kvalitetshandboken: en komponentbytet som var rimligt vid tidpunkten kan fortfarande ogiltigförklara underlaget, bedömningen och den tekniska filen samtidigt. Regeln som skyddar ett program här är enkel att formulera och lätt att hoppa över. Alla ändringar av komponenter i en bedömd konfiguration utlöser en dokumenterad granskning av vilket underlag ändringen gör ogiltigt. Granskningen är kort. Att hoppa över den är det som skapar konflikten sex månader senare om huruvida certifikatet fortfarande gäller för enheten i kartongen.

Frågor att ställa till en leverantör innan ni åtar er en pilotkörning
Listan nedan är den vi vill ha besvarad innan vi ens tar fram vår egen inköpsorder. Den är formulerad så att en leverantör kan besvara den direkt, och en leverantör som svarar direkt visar något om hur programmet kommer att bedrivas.
- Vad fastställer piloten, och vad fastställer den uttryckligen inte? Ett tydligt svar anger båda delarna. Ett svar som bara anger den första delen är ett försäljningssvar.
- Vilka kriterier är publicerade, vilka saknar underlag och vilka är okända för båda parter? Detta tvingar fram specifikationsluckorna medan de fortfarande är billiga att åtgärda.
- Hur många enheter, från vilka partier, i vilken konfiguration, och varför det antalet? Skälet spelar större roll än antalet.
- Är det konfigurationen som kommer att bedömas för överensstämmelse, och är modellkoden låst? Om svaret är nej kommer resultatet inte att kunna överföras till den levererade produkten.
- Vilken mätmetod, vilket instrument och vilken konditionering används? Om två leverantörer skulle mäta samma egenskap på olika sätt är resultaten inte jämförbara, och kriteriet behöver skrivas om.
- Vilket acceptanskrav gäller för varje kriterium, i siffror? Adjektiv är inte acceptanskrav.
- Kommer ni att tillhandahålla obearbetade mätvärden för varje enhet i stället för en sammanfattning? En fördelningsstatistik understöder beslut, medan ett medelvärde döljer den enhet som inte klarar kravet.
- Vad händer om piloten inte når acceptanskravet? Stoppa, justera och kör om; rapportera och fortsätt; eller rapportera och håll. Alla alternativ är legitima. Problemet är att inte veta vilket som gäller.
- Vad ligger på den kritiska vägen för den här körningen? Vanligtvis en formiteration, ett problem med komponenttillgänglighet eller ett dokumentationsberoende, och vart och ett av dem påverkar tidplanen på olika sätt.
- Hur många formcykler väntar ni er, och vad utlöser ytterligare en? En första form för en ny formgivning är sällan rätt första gången, och antalet påverkar både kostnad och datum.
- Vilka beslut är låsta vid det här tillfället, och vem ansvarar för beslutsloggen? På en ODM är det de förlorade besluten som parterna var och en antog att den andra hade dokumenterat.
- Vad är enhetskostnaden vid den planerade volymen, uppdelad per post? En prototyp är det första tillfället då ett verkligt pris kan tas fram i stället för en uppskattning, och det priset är ofta värdefullare än piloten själv.
Tolv frågor är det arbetande minimiet, och den fjärde och åttonde är de två som oftast avslöjar programmets verkliga status. En leverantör som kan besvara båda exakt är en leverantör vars pilotresultat kan användas i en kontraktsdiskussion. En leverantör som inte kan det visar att piloten kommer att vara en demonstration snarare än ett test, vilket är ett legitimt utfall så länge det är ett beslut och inte en överraskning.
Det finns fyra svarsmönster som bör betraktas som varningssignaler, och de bör namnges eftersom vart och ett av dem ser rimligt ut i isolerad mening. Det första är ett antal enheter som erbjuds innan några kriterier finns, vilket betyder att antalet kommer från en prislista snarare än från ett krav. Det andra är ett acceptanskrav som beskrivs i kvalitativa termer — utmärkt, som väntat, i linje med målet — vilket betyder att resultatet kommer att karaktäriseras snarare än mätas. Det tredje är en pilot som erbjuds på enheter som kommer att byggas efter överensstämmelsebedömningen, vilket kastar om den användbara ordningen: piloten ska informera den specifikation som bedöms, inte bekräfta en specifikation som redan låst. Det fjärde är en vägran att ange följden av ett underkänt resultat, vanligen formulerad som flexibilitet. Flexibilitet som tillämpas på ett godkänt resultat är en kommersiell fördel; flexibilitet som tillämpas på ett underkänt resultat är en olöst tvist som väntar på ett datum.
Det omvända mönstret är också värt att uppmärksamma. Leverantörer som svarar på fråga tre genom att förklara urvalslogiken, och på fråga sex genom att erbjuda sig att komma överens om metoden före körningen i stället för efteråt, arbetar vanligtvis utifrån en verklig process och inte från ett manus. I en due diligence-diskussion är beteendet i sig ett bevis, och det är mer informativt än ett snabbt svar på fråga ett.
Var våra publicerade data slutar, och vad vi kommer att åta oss skriftligt
Vår egen publicerade position ramar in den här artikeln, och den är tunnare på vissa områden och tydligare på andra än ett marknadsföringsdokument skulle antyda. Vi publicerar de angivna drifttiderna, färgalternativen, de strukturella funktionerna, laddningsgränsnitten, laddtiderna, batterikapaciteterna, kameraklasserna och fodralens kapacitet för vårt sortiment. Vi publicerar bimbovikten för en modell i katalogen – 158 g för MT6 – men inte för de övriga. Sensormodellen, synfältet, videospecifikationen, mikrofonvärdena, linsprestandan, testrapportnummer för partikelskydd och tätningsmaterialet publiceras inte. När det gäller överensstämmelse nämner ingen text i katalogen CE, FCC eller RoHS, och ingen rad knyter en försäkran om överensstämmelse till en modell. Det tillämpliga omfanget för en modell på en viss marknad måste därför levereras som skriftligt material som bifogas ordern, i stället för som en post som köparen kan läsa i det här dokumentet.
Vi publicerar inte våra ledtider för pilotprojekt, våra utvecklingskostnader, våra formsgörningskostnader, våra minimibeställningsmängder eller vår produktionskapacitet, och en förfrågan om dessa siffror leder till ett ärligt svar i stället för ett värde. Det vi kommer att åta oss skriftligt är snävare och mer användbart: Vi kommer att gå igenom de tolv frågorna ovan för en specifik design, berätta vilka av dem vi kan besvara i dag, vilka som kräver en tillverkning, och vilka som sannolikt är den främsta anledningen till att programmet försenas. Vi kommer också att rapportera resultatet av pilotprojektet, oavsett hur det går.
Den praktiska positionen är att ett pilotprojekt inom den här kategorin är mest värdefullt där de publicerade uppgifterna är tunnast – bimbovikten, kameraspecifikationen, det akustiska prestandet, linsprestandan och dokumentationen av partikelskyddet. Det är de luckorna ett pilotprojekt kan täppa till, och det är dit pilotprojektet bör riktas i stället för att ägnas åt att bekräfta uppgifter som redan är publicerade.
Relaterad läsning
- ODM-utveckling
- Prototypfasen i ett ODM-program
- Utvecklingsprocessen steg för steg
- Kan jag börja med en liten testorder
Berätta vad pilotprojektet ska fastställa, så kommer vi att säga vilken typ det är och vad det realistiskt kan ge svar på.



