Een odm-ontwikkelingsproefserie is eenvoudig aan te vragen, maar lastig te specificeren, en precies in het verschil tussen die twee situaties besteden de meeste proefprogramma's geld zonder bruikbare informatie te verkrijgen. Een inkoper vraagt twintig exemplaren aan, ontvangt twintig exemplaren en ontdekt vervolgens dat die twintig exemplaren de vraag niet kunnen beantwoorden die de aanvraag rechtvaardigde. De oorzaak is zelden dat een fabriek weigert mee te werken. Het komt doordat de proefserie is gespecificeerd als een hoeveelheid, terwijl ze had moeten worden gespecificeerd als een beslissing.
Een proefserie beantwoordt één vraag. Welke vraag dat is, hangt af van wat nog niet is vastgesteld, en in deze categorie zijn de dingen die nog niet zijn vastgesteld grotendeels de zaken die de gepubliceerde gegevens niet bevatten: het framegewicht voor andere modellen dan één specifiek model, het sensormodel, het gezichtsveld, de videospecificatie, de microfoongegevens, de lensprestaties, de rapportnummers voor bescherming tegen binnendringen en het materiaal van de afdichting staan allemaal niet in onze catalogus. De catalogus bevat voor geen enkel model een certificeringsrij en geen certificaatnummer, dus de reikwijdte die voor een bepaald model op een bepaalde markt geldt, is schriftelijk materiaal dat vóór de bestelling moet worden aangevraagd en gedocumenteerd, en niet een aanduiding die een inkoper op een pagina kan aflezen. Een odm-ontwikkelingsproefserie is hier dus geen formaliteit vóór de productie. Het is het mechanisme waarmee een specificatie ophoudt een beschrijving te zijn en wordt iets waarop een bestelbon, een garantieclausule en een nalevingsdossier alle drie kunnen steunen.
ODM-ontwikkelingsproefserie: drie typen proefseries die vaak met elkaar worden verward
De meest voorkomende specificatiefout in deze categorie is een proefserie te behandelen als één activiteit. Het zijn er drie, met verschillende hoeveelheden, verschillende acceptatiegrondslagen en verschillende resultaten, en een programma dat het ene type uitvoert terwijl het andere nodig had, verliest zowel tijd als geld.
Het procesproef is een korte serie waarvan het doel is vast te stellen of de productielijn de toleranties kan vasthouden en of de norm voor het eerste artikel haalbaar is. Het resultaat is een opbrengstcijfer en een lijst met gebreken. De acceptatiegrondslag is de consistentie tussen exemplaren, niet de prestaties van het product. Een procesproef zonder problemen laat zien dat de productielijn geschikt is; het zegt niets over de vraag of het ontwerp aan de eis voldoet, omdat de eis nooit daartegen is getest. Dit is het proef dat een productieprobleem aan het licht brengt, en het is het type dat de meeste fabrieken snel kunnen uitvoeren.
Het evaluatieproef is een korte serie waarvan het doel is exemplaren te produceren waarmee de eigen acceptatiecriteria van de inkoper kunnen worden gemeten. Het resultaat is bewijsmateriaal: een gewichtsverdeling over een steekproef, een camera-evaluatie onder vastgelegde omstandigheden, een reeks maten, een akoestische meting, een nieuwe test van de bescherming tegen binnendringen. De acceptatiegrondslag zijn criteria die de inkoper zelf heeft opgesteld, omdat de gepubliceerde gegevens ze niet bevatten. Dit is het proef dat de specificatiegaten sluit, en in deze categorie is dit het proef dat er werkelijk toe doet, omdat de risico's in die gaten zitten.
Het veldproef is een kleine serie die in de werkelijke omgeving van de klant, met werkelijke gebruikers, wordt ingezet. Het resultaat is gedragsdata: een retourpercentage over een bepaalde periode, een interactiepatroon, een week echt gebruik in een klaslokaal, een magazijn of een winkelruimte. De acceptatiegrondslag is wat er bij gebruik gebeurt, niet wat een testbank rapporteert. Dit is het proef dat de meeste programma's overslaan, en het is het enige dat kan vertellen of het product het probleem oplost, los van de vraag of het voldoet aan een specificatie die de inkoper zelf heeft opgesteld.
In een goed geleid programma zijn de drie opeenvolgend, in een slecht geleid programma zijn ze onafhankelijk. Een veelvoorkomende fout is het procesproef uitvoeren, tevreden zijn met de opbrengst en dat resultaat behandelen alsof het het resultaat van het evaluatieproef was. De twee antwoorden zijn niet uitwisselbaar, en een inkoper die het eerste als het tweede accepteert, heeft geen enkel gat gesloten.
De kosten van die verwarring zijn niet abstract. Een procesproef is goedkoop, snel en comfortabel, omdat de criteria intern bij de fabriek liggen en het resultaat doorgaans gunstig is. Een evaluatieproef verloopt langzamer en leidt waarschijnlijder tot een ongemakkelijk antwoord, omdat de criteria bij de inkoper liggen en de meetapparatuur mogelijk niet dezelfde is als die de fabriek normaal gebruikt. Programma's bewegen om precies die reden naar het eerste type toe en ontdekken dan bij de beoordeling vóór de productie dat de specificatievragen nog openstaan, terwijl de gereedschappen al zijn besteld. Bepalen welk type proefserie een vraag vereist, vóórdat er ook maar iets wordt gebouwd, is het goedkoopste uur van het hele programma.

De proefserie kiezen die uw openstaande vraag werkelijk vereist
De selectie is eenvoudiger dan programma's doen voorkomen, omdat de vraag vrijwel altijd al ergens in de eigen documentatie van de inkoper staat. Begin bij de acceptatiecriteria, niet bij het aantal exemplaren.
Stap één: schrijf de openstaande vraag in één zin. Als die niet in één zin kan worden geschreven, draagt de pilot meer dan één vraag en wordt geen van beide beantwoord. "Is de batterijcapaciteit toereikend?" is een vraag. "Zijn de batterij, de camera en de akoestiek goed?" zijn drie vragen met drie verschillende proefopzetten en drie verschillende gevolgen bij een mislukking.
Stap twee: markeer elk criterium op basis van de beschikbare bewijzen. Gepubliceerde gegevens zijn al vastgesteld en vereisen geen pilot. Gegevens die worden geclaimd maar niet zijn onderbouwd, vereisen een pilot. Gegevens die niemand heeft vermeld, vereisen eerst een schriftelijk criterium, omdat er niets is om tegen te testen. In onze eigen catalogus is die middelste kolom lang: de akoestische prestaties, de lensprestaties, het bewijs voor bescherming tegen binnendringing en de cameraspecificatie worden geclaimd of impliciet verondersteld in plaats van gepubliceerd.
Stap drie: stel vast of de vraag op een werkbank kan worden beantwoord. Gewicht, afmetingen, laadtijd, interfacegedrag en bescherming tegen binnendringing zijn vragen voor de werkbank. De maatvoering over een reeks hoofdformen is een vraag voor zowel het laboratorium als een testpanel. Vermoeidheid door meldingen, een audioomgeving met echte omgevingsruis, een lange werksessie en een retourpercentage zijn vragen voor veldtests en kunnen niet worden ingedicht in een laboratoriumschema, ongeacht wat de leverancier wil proberen.
Stap vier: leid het aantal exemplaren af van de bewering, niet van een rond getal. Voor een gewichts spreiding over exemplaren uit meer dan één batch zijn voldoende exemplaren nodig om die spreiding zichtbaar te maken. Een cameravergelijking tussen twee configuraties vereist een klein aantal exemplaren, maar aan beide kanten dezelfde configuratie. Een klas of een locatie vereist een klas of een locatie. Ronde getallen zoals tien of twintig zijn vrijwel altijd overgenomen uit een begroting in plaats van afgeleid van een bewering, en zijn de meest voorkomende reden dat een pilotresultaat later wordt weggelopen.
Stap vijf: bepaal vooraf wat er gebeurt als de pilot mislukt. Een pilot zonder vastgelegde gevolgen bij een mislukking levert een pilot op die wordt geïnterpreteerd. Dat is geen kritiek op de fabriek; dat is wat er met elk resultaat gebeurt waarvoor geen drempelwaarde is vastgelegd. De gevolgen moeten worden beschreven voordat de exemplaren worden gebouwd, omdat de inkoper daarna commercieel betrokken is bij één kant van het antwoord.
Er is een zesde stap die ervaren inkopers toevoegen en die de meeste leveranciers niet opvragen: vastleggen waar de pilotexemplaren fysiek in het schema vandaan komen. Een pilot die is afkomstig uit een preproductieopzet concurreert met dezelfde dagen als gereedschapsontwikkeling, firmware- en documentatiewerk. Een pilot uit de eerste productiebatch concurreert met niets, maar komt later en kan het ontwerp niet beïnvloeden. Die afweging is een programmakeuze en geen fabriekskeuze, en hoort in de offerte te staan in plaats van in de eerste e-mail nadat de inkooporder is ondertekend. Als een pilot is ingepland tussen een ontwerpfreeze en een nalevingsbeoordeling, kunt u verwachten dat de documentatie op de kritieke route ligt in plaats van de bouw. Vraag welke van beide de datum feitelijk bepaalt.
Het pilotprotocol schrijven voordat de exemplaren worden gebouwd
Het protocol is het document dat een testrun in bewijs omzet. Het bevat zes elementen, en een programma dat deze vóór de bouw vastlegt, krijgt een resultaat waarop een beroep kan worden gedaan; een programma dat ze achteraf vastlegt, krijgt een verhaal.
De criteria, numeriek en met drempelwaarden. "De batterij presteert acceptabel" kan niet mislukken. "De opgegeven gebruiksduur valt bij de genoemde belasting binnen de gepubliceerde waarde, gemeten op exemplaren uit de beoordeelde configuratie" kan dat wel. Elke parameter in de specificatie waarvoor geen bewijs beschikbaar is, moet als regel in deze tabel worden opgenomen, met een methode, een drempelwaarde en een bijbehorend besluit.
De selectieregel voor exemplaren. Welke batches, welke posities binnen de batch en welke configuratie. Exemplaren uit één run aan het einde van een lange bouw zijn de zwakst mogelijke steekproef, omdat ze alles gemeen hebben wat van batch tot batch verschilt. Als de pilot bedoeld is om de procesmogelijkheden aan te tonen, is dat precies de steekproef die u wilt; als de pilot bedoeld is om het product te karakteriseren, is dat precies de steekproef die u niet wilt.
De meetmethode en het meetinstrument. Twee teams kunnen bij dezelfde exemplaren verschillende resultaten meten en allebei gelijk hebben, omdat het ene team na een opwarmcyclus en het andere team vanaf koud heeft gemeten. De methode hoort in het protocol, inclusief de conditionering, de belasting, de omgevingsconditie en het aantal herhalingen.
Conditionering verdient een eigen regel, omdat het doorgaans tijdens deze fase wordt beslist wie gelijk krijgt bij discussies over metingen. Een resultaat dat met de cel te maken heeft, hangt af van hoe lang het apparaat heeft gedraaid, wat het heeft gedaan en hoe lang het heeft gerust voordat de meting begon. Een resultaat voor de oppervlaktetemperatuur hangt af van de omgevingscondities en van hoe lang de belasting al actief was. Een akoestisch resultaat hangt af van de omgeving waarin wordt gemeten, en een open testbank is niet dezelfde omgeving als een straat. Dit zijn geen exotische eisen; het zijn simpelweg details die doorgaans worden beslist door degene die als eerste meet, en die volgens het protocol moeten worden beslist. Als een waarde uiteindelijk in een technisch dossier terechtkomt, leg dan ook de identificatie van het meetinstrument vast, naast de meetwaarde, omdat een niet-traceerbare meting in een due diligence-onderzoek geen bewijs is, ook niet wanneer deze correct is.
De steekproefomvang, met de reden vermeld. Niet "20 exemplaren", maar "20 exemplaren, omdat de claim een spreiding binnen een batch betreft en voor een spreiding meer dan één exemplaar per positie nodig is". Door de reden te vermelden, is het aantal verdedigbaar wanneer de resultaten worden betwist en wordt duidelijk wanneer het aantal is overgenomen in plaats van afgeleid.
De ruwe gegevens, niet de samenvatting. Een pilotrapport dat één waarde geeft zonder de verdeling is een samenvatting, en juist in samenvattingen blijven gunstige meetwaarden bestaan, terwijl ongunstige verdwijnen. Vraag om de meetwaarden per exemplaar.
De rapportageafspraak. Wat de leverancier toezegt te doen met een resultaat dat onder de drempel valt: stoppen, bijstellen en opnieuw uitvoeren, rapporteren en doorgaan, of rapporteren en aanhouden. In onze eigen positie voeren we een pilot uit op basis van schriftelijke criteria en rapporteren we de uitkomst ongewijzigd, inclusief de uitkomst waarin de eerlijke conclusie luidt dat de gepubliceerde gegevens na de test nog steeds de beste beschrijving van het product vormen.

Wat een pilotrun in deze categorie niet kan vaststellen
Een pilot is een begrensde exercitie, en de duurste misvatting in deze categorie is om hem te behandelen als een volledige test. Vier dingen zal hij niet doen, ongeacht hoeveel exemplaren hij produceert.
Hij toont niet de productieconsistentie op grote schaal aan. Een pilot bewijst dat het proces iets kan. De capaciteit voor grootschalige productie blijkt uit bewijs van een run-at-rate, capability-data over een aanhoudend tijdvak en een controlplan, die een korte run niet kan opleveren. Een pilot van twintig exemplaren is een indicatie en niets meer, en een leverancier die een pilotyield presenteert als productieyield doet een claim die de gegevens niet ondersteunen.
Hij toont niet het gedrag gedurende de levensduur van het product aan. Celdegradatie, veroudering van afdichtingen, slijtage van scharnieren, drift in batterijcycli en vermoeidheid van het frame zijn allemaal tijdafhankelijk. Een pilot die in week twee wordt gemeten, zegt niets over week veertig. Waar de levensduur van belang is, is het bewijs een afzonderlijk programma met een eigen planning, dat vroeg moet worden gestart juist omdat het langzaam verloopt.
Hij verhelpert de documentatiestatus niet. Een technisch dossier, een conformiteitsverklaring en een certificaatstatus zijn een functie van documentatie, niet van testen. Een pilot kan metingen opleveren die een dossier ondersteunen, maar kan het dossier zelf niet produceren. De catalogus publiceert voor geen enkel model een certificeringsrij, dus een pilot heeft op dat punt geen uitgangspunt en geen pilotrun verandert wat ontbreekt. Alleen een document opgesteld voor een gespecificeerde modelcode en een gespecificeerde markt doet dat.
Hij vertelt u niet of de markt het product wil. Een pilot kan u vertellen dat het exemplaar voldoet, functioneert en de test doorstaat. Vraag wordt vastgesteld door een commerciële test met een andere structuur, een andere kostprijs en een ander risicoprofiel, en het mengen van beide in één programma betekent doorgaans dat de commerciële vraag wordt beantwoord met het technische antwoord.
Er is een vijfde grens die specifiek voor deze categorie geldt en die rechtstreeks moet worden benoemd. Een pilot die is gebouwd op preproductie-exemplaren en wordt getoetst aan preproductiecriteria, reproduceert de leemtes die hij moest dichten, omdat de exemplaren zelf zijn gebouwd op dezelfde onbewezen aannames als de specificatie. Dat is geen reden om de pilot over te slaan. Het is een reden om vóór de run de modelcode en de beoordeelde configuratie vast te leggen, zodat het resultaat de configuratie beschrijft die daadwerkelijk op de markt zal worden gebracht.
En er is een zesde, die meestal het laatst wordt ontdekt. Een pilot demonstreert de eenheden die ervoor staan. Als een component na de pilot wordt vervangen — omdat het originele niet meer beschikbaar is, omdat een leverancier zijn specificatie wijzigt, omdat een tweede bron om kostentechnische redenen is gekwalificeerd — dan beschrijft het pilotresultaat een product dat niet meer bestaat en wordt de kloof stilletjes weer geopend. Daarom hoort een wijzigingsbeheersregel in de pilotovereenkomst te staan en niet in het algemene kwaliteitshandboek: een vervanging die op dat moment redelijk was, kan het bewijs, de beoordeling en het technische dossier tegelijkertijd ongeldig maken. De regel die een programma hier beschermt, is eenvoudig te formuleren en gemakkelijk over te slaan. Elke wijziging van een component in een beoordeelde configuratie vereist een gedocumenteerde beoordeling van welk bewijs de wijziging ongeldig maakt. De beoordeling is kort. Als u die over slaat, ontstaat er zes maanden later discussie over of het certificaat nog van toepassing is op de eenheid in de doos.

Vragen om een leverancier te stellen voordat u zich committeert aan een pilotrun
De onderstaande lijst is de lijst die we zouden willen hebben beantwoord voordat onze eigen inkooporder werd opgesteld. De lijst is zo geschreven dat een leverancier er direct antwoord op kan geven, en een leverancier die dat direct doet, vertelt u iets over de manier waarop het programma zal worden uitgevoerd.
- Wat stelt deze pilot vast en wat stelt hij expliciet niet vast? Een duidelijk antwoord noemt beide kanten. Een antwoord dat alleen de eerste noemt, is een verkoopantwoord.
- Welke criteria zijn gepubliceerd, welke zijn niet met bewijs onderbouwd en welke zijn voor beide partijen onbekend? Dit dwingt de specificatiegaten open op het moment waarop ze nog goedkoop zijn om aan te pakken.
- Hoeveel eenheden, uit welke partijen, in welke configuratie en om welk aantal? De reden is belangrijker dan het aantal.
- Is dit de configuratie die op naleving zal worden beoordeeld en is de modelcode vastgesteld? Als het antwoord nee is, is het resultaat niet overdraagbaar naar het geleverde product.
- Wat is de meetmethode, het meetinstrument en de conditionering? Als twee leveranciers dezelfde eigenschap verschillend zouden meten, zijn de resultaten niet vergelijkbaar en moet het criterium worden herschreven.
- Wat is de acceptatiedrempel voor elk criterium, uitgedrukt in cijfers? Bijvoeglijkwoorden zijn geen drempelwaarden.
- Geeft u ruwe meetwaarden per eenheid in plaats van een samenvatting? Een verdeling ondersteunt beslissingen; een gemiddelde verbergt de eenheid die niet voldoet.
- Wat gebeurt er als de pilot de drempel niet haalt? Stoppen, aanpassen en opnieuw uitvoeren; rapporteren en doorgaan; of rapporteren en wachten. Elk daarvan is legitiem. Het probleem ontstaat wanneer niet bekend is welke aanpak van toepassing is.
- Wat bevindt zich op het kritieke pad voor deze run? Meestal een gereedschapsiteratie, een probleem met componentbeschikbaarheid of een documentatieafhankelijkheid, en elk daarvan heeft een andere invloed op de planning.
- Hoeveel gereedschapscycli verwacht u en wat leidt tot een extra cyclus? Het eerste gereedschap voor een nieuwe vorm is zelden in één keer goed, en het aantal beïnvloedt zowel de kosten als de datum.
- Welke beslissingen zijn op dit moment bevroren en wie beheert het beslislogboek? Bij een ODM gaan de verloren beslissingen verloren doordat beide partijen aannamen dat de andere ze had vastgelegd.
- Wat is de eenheidskost bij het geplande volume, opgesplitst per post? Een prototype is het eerste moment waarop een reëel getal in plaats van een schatting kan worden opgesteld, en dat getal is vaak waardevoller dan de pilot zelf.
Twaalf vragen zijn het praktische minimum, en de vierde en achtste vragen tonen meestal de werkelijke stand van zaken van het programma. Een leverancier die beide precies kan beantwoorden, is een leverancier van wie het pilotresultaat kan worden gebruikt in een contractuele discussie. Een leverancier die dat niet kan, laat u weten dat de pilot een demonstratie wordt in plaats van een test. Dat is een legitieme uitkomst, zolang het een beslissing is en geen verrassing.
Er zijn vier antwoordpatronen die als waarschuwingssignalen moeten worden beschouwd. We noemen ze omdat ze elk op zichzelf redelijk lijken. Het eerste is een aantal eenheden dat wordt genoemd voordat er criteria bestaan, wat betekent dat het aantal uit een prijslijst komt en niet uit een claim. Het tweede is een drempel die kwalitatief wordt beschreven — uitstekend, zoals verwacht, in overeenstemming met het doel — wat betekent dat het resultaat zal worden gekarakteriseerd in plaats van gemeten. Het derde is een pilot die wordt aangeboden met eenheden die pas na de nalevingsbeoordeling worden gebouwd. Daarmee wordt de nuttige volgorde omgekeerd: de pilot moet de specificatie informeren die wordt beoordeeld, niet een specificatie bevestigen die al is vastgelegd. Het vierde is een weigering om de gevolgen bij een mislukking te vermelden, meestal geformuleerd als flexibiliteit. Flexibiliteit bij een geslaagd resultaat is een commerciële deugd; flexibiliteit bij een mislukt resultaat is een onopgelost geschil dat wacht op een datum.
Ook het omgekeerde patroon is de moeite waard om op te merken. Leveranciers die vraag drie beantwoorden door de steekproeflogica uit te leggen, en vraag zes door vooraf akkoord te gaan over de methode in plaats van achteraf, werken doorgaans met een echt proces in plaats van een draaiboek. In een gesprek over due diligence is dat gedrag zelf bewijs, en het is informatiever dan een snel antwoord op vraag één.
Waar onze gepubliceerde gegevens eindigen en waar we ons schriftelijk aan zullen binden
Onze eigen gepubliceerde positie vormt het kader voor dit artikel, en is op sommige punten dunner en op andere punten steviger dan een marketingdocument zou suggereren. We publiceren de opgegeven gebruiksduur, de kleuropties, de structurele kenmerken, de oplaadinterfaces, de oplaadtijden, de batterijcapaciteiten, de cameratiers en de casecapaciteiten voor ons assortiment. Voor één model in de catalogus publiceren we het gewicht van het frame — 158 g voor de MT6 — en voor de rest niet. Het sensormodel, het beeldveld, de videospecificatie, de microfoongegevens, de lensprestaties, de nummers van de testrapporten voor bescherming tegen invloed van buitenaf en het materiaal van de afdichting zijn niet gepubliceerd. Wat naleving betreft: in de catalogustekst wordt CE, FCC of RoHS niet genoemd, en geen enkele regel koppelt een conformiteitsverklaring aan een model. De toepasselijke reikwijdte voor een model in een bepaalde markt moet daarom als schriftelijk materiaal bij de bestelling worden aangeleverd, en kan niet als een regel worden gelezen die de koper uit dit document kan halen.
We publiceren onze doorlooptijden voor pilotprojecten, onze ontwikkelingskosten, onze gereedschapskosten, onze minimale afnamehoeveelheden of onze productiecapaciteit niet, en een verzoek om die cijfers levert een eerlijk antwoord op in plaats van een getal. Waar we ons schriftelijk aan willen binden is smaller en nuttiger: we zullen de twaalf bovenstaande vragen doorlopen voor een specifiek ontwerp, aangeven welke vragen we vandaag kunnen beantwoorden, welke een proefproductie vereisen en welke waarschijnlijk de reden zijn dat het programma uitloopt. We zullen de uitkomst van de pilot rapporteren, ongeacht hoe deze uitvalt.
De praktische positie is dat een pilot in deze categorie het meest waard is waar de gepubliceerde gegevens het dunst zijn — het gewicht van het frame, de cameraspecificatie, de akoestische prestaties, de lensprestaties en het bewijs voor bescherming tegen invloed van buitenaf. Dat zijn de gaten die een pilot kan dichten, en de gaten waarop een pilot gericht moet worden in plaats van op het opnieuw bevestigen van cijfers die al gepubliceerd zijn.
Gerelateerde lectuur
- ODM-ontwikkeling
- De prototypefase in een ODM-programma
- Het ontwikkelingsproces stap voor stap
- Kan ik beginnen met een kleine proeforder
Vertel ons wat de pilot moet aantonen, dan zeggen wij welk soort pilot het is en wat deze realistisch kan beantwoorden.



