OEM/ODM-производитель умных очков · Шэньчжэнь, Китай +86 19835872450 sales@cynrin.com
Технология умных очков

Как проверить качество микрофона смарт-очков в 5 положениях

Тест микрофона в тихой комнате почти ничего не говорит о продукте, который будут использовать на улице. Стоит провести сравнение…

От команды инженеров и специалистов по снабжению CYNRIN/ Jan 2, 2020/ 3 мин. чтения
Как проверить качество микрофона смарт-очков в 5 положениях

Качество микрофона смарт-очков: сравнение с помощью сценария

Тест микрофона, который начинается в тихой комнате, почти ничего не говорит о продукте, который будет использоваться на улице. Сравнение, которое действительно стоит провести, предполагает переход от тихой комнаты к реальному звонку на улице. Порядок важен потому, что каждая позиция показывает, каким из предыдущих можно доверять. Позицию, которую вы пропустите, — это как раз позиция, из которой ваш клиент будет жаловаться, а опубликованный результат будет тем, который вы зафиксировали, а не тем, на который надеялись.

В рамках этого решения есть ещё один выбор, и он носит коммерческий, а не акустический характер. Покупатель, сравнивающий двух кандидатов для продукта, предназначенного для звонков, решает не то, какой микрофон лучше. Он решает, стоит ли разница, которую он вот-вот увидит, тех денег, которые потребуются на изменение уже подготовленного к производству продукта. Сравнение, которое даёт только рейтинг без каких-либо последствий, — это потраченный день; сравнение, которое даёт отсортированный список с пороговым значением для каждой строки, — это документ, обосновывающий второй заказ на закупку.

Качество микрофона смарт-очков: вопросы поставщику и расплывчатые ответы

Семейство Bluetooth-аудио публикует свою методику, а вместе с ней — заявленные возможности направленного аудио и интеллектуального шумоподавления, однако ни одна модель в этом семействе не публикует спецификации микрофонов: ни расстояния считывания, ни коэффициента шума, ни частотной характеристики, ни количества микрофонов, ни стороннего отчёта по какому-либо из этих параметров. Именно из-за этого отсутствия существует данная статья. Когда спецификация отсутствует, её заменяет протокол, который необходимо составить до прибытия образцов, а не после начала разногласий.

Что уже есть у покупателя и чего ему не хватает

Покупатель, проводящий такую последовательность испытаний, обычно выбирает между двумя моделями-кандидатами для продукта, который будет использоваться для звонков. В его распоряжении есть образцы, профиль клиента, целевая цена и позиция поставщика в каталоге. При этом у него не будет абсолютно никаких акустических данных, и причиной этому является структурная, а не небрежность: акустические данные формирует производитель модуля, и сборочное предприятие обычно получает их как спецификацию компонента, а не как результат испытаний готового продукта. Этот пробел не виноваты ни покупатель, ни завод, но кто-то должен его устранить до отправки заказа на закупку.

Главным риском в рамках этого процесса является предварительная демонстрация. Демонстрации проводятся в благоприятных условиях, самим человеком, создавшим продукт, на удачном расстоянии, с привычной фразой и на выбранной демонстратором громкости. Каждый из этих параметров является переменной, и их сочетание почти всегда создаёт преимущество одному продукту — обычно тому, чья обработка настроена на работу в конкретных условиях демонстрации.

Воспроизводимость сравнения обеспечивают два фактора, и оба они недороги. Первый — фиксированный сценарий, поскольку импровизированная речь меняет содержание, а содержание влияет на разборчивость. Второй — согласованный уровень выходного сигнала, поскольку более громкий продукт звучит чётче независимо от того, действительно ли он лучше, и это единственное упущение обесценивает больше сравнений, чем любая другая ошибка в последовательности.

Сгенерированное ИИ фотографическое изображение, иллюстрирующее тестирование качества микрофона смарт-очков в пяти позициях — изображение 1 из 3

Список вопросов, который отличает разработчика от посредника по компонентам

Задайте эти вопросы письменно до испытания образцов и разделите два списка на две колонки перед отправкой. Правая колонка ниже — та, которая имеет значение: именно в ней отвечает поставщик, контролирующий акустическую разработку, и не отвечает поставщик, просто передающий спецификацию компонента.

Измерено ли указанное значение на изделии или на компоненте. Спецификация компонента описывает микрофон в испытательном стенде, на фиксированном расстоянии и с фиксированным входным сигналом. Продукт, который приобретает клиент, дополнительно включает геометрию оправы, уплотнение, защиту от ветра, расположение отверстия относительно рта и обработку, которую применяет прошивка. Эти параметры несопоставимы, и клиент покупает именно второй вариант.

Сколько микрофонов установлено и как они объединены. Количество вместе с методом — смешиваются ли они, переключаются или формируется луче — является пригодным для использования ответом. Такая фраза, как «массив из нескольких микрофонов», относится к категории, а не к спецификации, а категорию нельзя проверить относительно порогового значения.

Какая обработка применяется к сигналу. Каждый этап обработки вносит артефакты: отсечение звука между словами, пульсацию на устойчивых слогах, тонкий или сдавленный оттенок гласных и ощущение, что из голоса что-то удалили. Назвать технологию и описать возникающий артефакт полезнее, чем заявлять, что технология устраняет шум, поскольку первое можно проверить, а второе можно лишь повторять в описании продукта без каких-либо подтверждающих данных.

Существует ли сторонний отчёт о готовом продукте. Критерий прохождения — отчёт с указанием методики и даты. Формулировка «Проверено лабораторией типа SGS» описывает категорию испытаний, а не документ, который можно предъявить позднее.

Что опубликовано о дальности передачи голоса или отклике. Критерий прохождения — числовой показатель с указанными условиями. Формулировка «чётко и сбалансированно» описывает субъективное предпочтение, а предпочтения не сохраняют результат при сравнении.

Что происходит, когда входящий сигнал отсутствует. Этот вопрос никто не задаёт, однако именно он раскрывает поведение при обработке сигнала. Письменное описание состояния без входящего сигнала свидетельствует о том, что поставщик охарактеризовал продукт. Отсутствие такого описания также является информацией.

Каков уровень выходного сигнала со стороны динамика. Микрофон — лишь половина разговора. Отличный микрофон в сочетании с тихим динамиком даёт продукт для тихого помещения, независимо от возможностей микрофона самого по себе.

Какое обозначение модели описано в ответе. Критерий прохождения — опубликованное обозначение точной конфигурации. Название серии не подходит, поскольку в серии есть как минимум одна конфигурация с другим поведением.

Пороговые значения в терминах телефонного разговора

Строка в оценочном листе Как измеряется Пороговое значение для продукта, предназначенного для звонков Результат, не соответствующий требованиям
Речь на расстоянии трёх метров Фиксированный текст, произнесённый диктором с расстояния трёх метров Понятно с первого раза, повтор не требуется Удалённая сторона просит повторить
Речь на расстоянии одного метра Тот же текст, тот же уровень Понятно с первого раза Обычно не является критичным показателем
Реальный звонок Звонок в реальном времени, оцениваемый удалённой стороной Удалённая сторона без подсказки сообщает, что звонок звучит чётко Удалённая сторона говорит: «Вас немного тихо слышно» или «Что?»
Уличный шум Запись голоса абонента с фиксированного расстояния при постоянном уровне шума Слова остаются различимыми на фоне шума Абоненту нужно отойти от ветра, чтобы его было слышно
Ветер Поток воздуха перед лицевой частью очков с фиксацией условий Нет низкочастотного гула, заглушающего речь Абонент сообщает о треске или низкочастотном гуле
Артефакты обработки Прослушивание без присвоения оценки Нет приглушения, pumping-эффекта и «тонкого» тембра Высокая оценка разборчивости при отсутствии признаков жизни в сигнале
Выходной уровень Уровни согласованы до начала первой записи Уровни согласованы, настройка зафиксирована Любое сравнение без согласования уровней

Две строки этой таблицы предсказывают тенденцию возвратов, а не оценку в обзоре. Строка реального звонка, поскольку это единственная строка, в которой клиент оценивает продукт в реальных условиях, и строка артефактов, поскольку оценка разборчивости систематически отдаёт предпочтение сигналу, обработанному до потери естественности. Если в вашем оценочном листе есть столбец разборчивости, но нет столбца артефактов, оценочный лист будет систематически отдавать предпочтение худшему продукту.

Выбор positions для проверки, соответствующих реальным условиям звонков

Пять позиций: от тихой комнаты до ветреной улицы

Процедура проверки включает пять позиций, каждая из которых предполагает успешное прохождение предыдущей. Сбой на любой позиции показывает, что сообщила бы следующая позиция, поэтому порядок имеет значение, а протокол, начинающийся с четвёртой позиции, протоколом не является.

Пять позиций: от тихой комнаты до ветреной улицы

Позиция первая: базовый тест в тихой комнате. Тот же текст, то же расстояние, тот же диктор, тихая комната, согласованный уровень выходного сигнала. Это эталон, относительно которого оцениваются остальные четыре позиции. Если на этом этапе согласование уровней выполнено неверно, все последующие позиции также будут оценены неверно, поэтому согласование выполняется до записи, а не после неё.

Позиция вторая: речь на расстоянии одного и трёх метров. Воспроизведите фиксированный фрагмент голоса диктора, сначала с расстояния одного метра, затем — трёх. На одном метре практически любой продукт проходит испытание, поэтому это контрольная, а не тестовая позиция. Три метра — примерно разговорное расстояние во время реального звонка, и именно на нём проявляются различия в чувствительности. Используйте фиксированный исходный материал с равномерным уровнем и известным содержанием — идеально подходит новостная сводка, — а не импровизированную речь, поскольку в ней меняется плотность слогов, и эти изменения будут восприняты как различие между продуктами.

Позиция третья: реальный звонок. Сделайте звонок. Попросите удалённую сторону оценить разборчивость, поскольку именно разборчивость воспринимает клиент, а не громкость. Удалённая сторона не должна знать, какой продукт оценивает, и должна выставлять оценку, не глядя на экран: человек, видящий название модели, склонен прощать больше. Именно эта позиция даёт ответ на вопрос, ради которого продукт приобретают.

Позиция четвёртая: уличный шум и ветер. Запишите голос абонента на фиксированном расстоянии при фоновом шуме заданного уровня, сохраняя тип шума неизменным: тест с шумом дорожного движения на указанном уровне — не то же самое, что тест с гулом толпы, а их переключение в середине серии делает результаты несопоставимыми. Затем проверьте ветер, обязательно указав условия воздушного потока в письменном виде, поскольку преобразователь на дужке находится непосредственно на пути воздушного потока. Шум ветра низкочастотный, а именно с такими частотами базовая фильтрация справляется хуже всего. При этом это условие чаще всего остаётся незафиксированным, поскольку его трудно воспроизвести. Для ранжирования достаточно грубого, но воспроизводимого теста: перед дужками на указанном расстоянии перемещают полоску бумаги.

Позиция пятая: оценочный лист. Поставьте оценки до формирования предпочтения и примите решение только после этого. Два человека должны оценивать результаты независимо, а любую строку, в которой их оценки расходятся, следует перепроверить. Почти всегда это будет строка, предсказывающая возвраты: расхождения сосредоточены там, где разница минимальна, а именно на минимальных различиях находятся пороги, определяющие решение покупателя.

Строки оценочного листа, по которым необходимо достичь согласия перед первой записью

Проверьте по два экземпляра каждого кандидата в одном сеансе. Один экземпляр может оказаться нетипичным, а тест двух экземпляров также показывает, насколько стабильны показатели продукции. Это вопрос производства, а не продукта. Если два экземпляра одной модели получили разные оценки, перед вами проблема стабильности производства, которую нужно поднять перед поставщиком. Гораздо дешевле выявить её на двух образцах, чем на производственной партии.

Подготовьте сценарий до первой записи и храните его вместе с записями. Сценарий, расстояние, уровень шума, условия воздушного потока, согласованная настройка выходного сигнала, два оценщика и их необработанные оценки. Когда через шесть месяцев покупатель предъявит претензию, именно этот документ позволит заменить спор повторным тестированием.

Сгенерированный ИИ фотографический снимок, иллюстрирующий проверку качества микрофона смарт-очков по пяти позициям — изображение 2 из 3

Шесть способов ошибочно определить программу обеспечения качества звонков

Побеждает более громкий продукт, хотя лучшим является совсем другой. Признак проблемы — рейтинг, который меняется местами, когда второй покупатель проводит тот же тест. Причина в том, что этап сопоставления уровней был пропущен, поэтому сравнение измеряло мощность выходного сигнала, а не качество передачи. Чтобы избежать этого, перед первой записью необходимо сопоставить уровень выходного сигнала и зафиксировать настройку, при которой он был получен, поскольку для двух разных продуктов одна и та же настройка означает разные вещи.

Сравнение выигрывает на одном метре и проигрывает на трёх. Признак проблемы — поставщик приводит результат испытания на одном метре в коммерческом предложении, тогда как покупатель сообщает, что его невозможно расслышать. Причина в том, что проверялось только самое лёгкое расстояние, которое подходит почти для любого оборудования. Чтобы избежать этого, необходимо включить оба расстояния в протокол и считать результат на трёх метрах тем, который лучше всего предсказывает качество звонка.

В помещении продукт работает хорошо, а на улице им невозможно пользоваться. Признак проблемы — высокая оценка от тестовой группы в офисе и низкая оценка от реального канала продаж. Обычно это проявляется не в возвратах, а в виде закономерности на площадках отзывов. Причина в том, что условия шума никогда не включались в протокол, поскольку собственная среда покупателя находилась в помещении. Чтобы избежать этого, необходимо включить уличные условия в протокол до прибытия образцов и сохранять тип шума неизменным на протяжении всего тестирования.

Шум ветра слышен только на улице, а поставщик считает это нормой. Признак проблемы — замечание во время звонка поставщику о том, что для данного форм-фактора работа с ветром — норма, что верно и одновременно составляет всю суть проблемы. Причина в том, что условия воздушного потока никогда не указывались, поэтому результат невозможно сравнить ни с чем. Чтобы избежать этого, необходимо фиксировать условия воздушного потока при каждом измерении шума ветра и отказываться от сравнения двух результатов, если в обоих не указаны эти условия.

Обработка шума удаляет часть речи, и никто этого не замечает. Признак проблемы — продукт получает высокие оценки за разборчивость, но пользователи описывают его звук как роботизированный, плоский или тихий. Причина в том, что тест оценивал только разборчивость, а такие оценки не отражают безжизненность сигнала. Чтобы избежать этого, необходимо явно прослушивать артефакты и считать артефакт, возникающий из-за регулирования усиления, отказом независимо от оценки разборчивости.

Сравнение провели один раз и больше не повторяли. Признак проблемы — образец показывает хорошие результаты, а серийная продукция отличается по стабильности, что проявляется как необъяснимый рост возвратов. Причина в том, что единственный сеанс тестирования образцов приняли за производственный контроль, хотя это не так. Чтобы избежать этого, необходимо одновременно с сравнением образцов согласовать и контроль со стороны производства: эталонный экземпляр, установленную периодичность тестирования и заключение третьей стороны о готовом продукте, если продолжительность программы оправдывает его проведение.

Сгенерированный ИИ фотографический снимок, иллюстрирующий проверку качества микрофона смарт-очков по пяти позициям — изображение 3 из 3

Во сколько обходится неудачный звонок и как это определяет бюджет тестирования

Коммерческий вопрос, скрытый за акустическим сравнением, легко упустить из виду, хотя именно он определяет, сколько усилий заслуживает это сравнение. Неудачный звонок — это не возврат. Это клиент, который перестаёт пользоваться функцией, а функция, которой перестают пользоваться, не сможет получить защиту в разговоре о следующем продлении контракта. Расходы отражаются не в показателях возвратов, а в кривой удержания клиентов, поэтому они не попадают в файл, который изучает закупщик при принятии решения.

Именно поэтому разумнее потратить средства на тест, а не на оплату образца. Сравнение обходится закупщику в один рабочий день одного специалиста и небольшие расходы на поездку или доставку, а результатом становится рейтинговый список с установленными пороговыми значениями. Альтернатива — пропустить сравнение, выбрать поставщика по результатам демонстрации и узнать о проблемах в эксплуатации. К этому моменту расходы включают запрос поставщику на внесение изменений, переработку корпуса, если положение порта необходимо изменить, обновление страницы товара и переговоры с каналом о продукте, которая больше не соответствует своему описанию.

Некоторые коммерческие условия для продукта, основанного на звонках, действительно подлежат согласованию. Минимальный объём заказа обсуждается отдельно для каждой модели и каждого канала, и обязательство в отношении двух моделей обычно ценнее для поставщика, чем более высокий объём заказа одной модели. Упаковка и дизайн вкладышей, включая рыночные этикетки и язык комплекта документации, представляют собой недорогой предмет переговоров без каких-либо последствий для оснастки электронного продукта. Разбивка поставок в соответствии с этапом утверждения образца нередко согласуется легче, чем скидка с цены. Для программы, ключевым параметром которой является акустика, это ценнее скидки, поскольку позволяет принять акустическое решение до утверждения_final artwork. Условия оплаты относятся к стандартной практике: первоначальный платёж при размещении заказа, остаток после успешного прохождения проверки и удержание части оплаты, привязанное к комплекту документов, защищают закупщика в случае сбоя, который обходится дороже всего.

Другие вопросы не подлежат согласованию, и об этом стоит сказать сразу, а не выяснять на позднем этапе. Стоимость сертификации и сроки её получения не являются коммерческим рычагом: затраты распределяются на семейство продукции, а прошедшее время зависит от испытательной лаборатории и очереди на проверку. Оснастка обычно представляет собой единовременные расходы, распределяемые на первый заказ, поэтому важно уточнить, на какой объём она распределяется и что произойдёт с оснасткой в случае прекращения программы. Прошивка также не подлежит согласованию в той же мере, что и цена единицы: комплект микрофонов, настройка цифровой обработки сигналов и состояние обработки по умолчанию являются частью продукта. Поставщик, который не готов обсуждать эти вопросы, сообщает, что акустическое поведение фиксировано и единственным рычагом является корпус.

Документы, которые следует запросить до внесения депозита. Конфигурацию микрофонов в письменном виде, с указанием количества и метода объединения. Письменное описание обработки и ожидаемых артефактов. Ссылку на отчёт третьей стороны с указанием метода и даты, если такой отчёт существует. Номера сертификатов с указанием выдавшего органа и сроков действия. Обозначение модели, указанное в коммерческом предложении, а не подразумеваемое названием серии. Маршрут получения образца описан в разделе оценка образца.

Положения, которые необходимо включить в договор. Обозначение модели отдельной позицией с приложенными номерами сертификатов. Критерии приёмки образца со ссылкой на пять положений и согласованный уровень выходного сигнала. Положение, требующее предварительного уведомления о любых изменениях микрофонов, настройки цифровой обработки сигналов или прошивки, поскольку изменение прошивки меняет акустический результат без изменения аппаратной части. Положение о том, кто несёт расходы, если образец не соответствует критериям приёмки.

Условный пример линейки продуктов с приоритетом голосового управления в сравнении с действующей гарнитурой

Приведённый ниже пример — это разбор возможного сценария, а не описание клиентского проекта. Его цель — показать порядок принятия решений, а не представить результат.

Предположим, что бренд выходит в категорию продуктов, основанных на звонках, с первой линейкой продукции, конкурируя с устоявшейся гарнитурой. У закупщика есть одно коммерческое предложение от поставщика на модель с аудио Bluetooth, целевой ценовой диапазон и канал, объединяющий профессиональных пользователей и неформальных абонентов. Основное ограничение заключается в том, что описание продукта бренда будут читать люди, у которых в кармане уже есть работающая альтернатива. Поэтому продукт, звучащий хуже действующего решения, не получит повторной покупки.

Шаг первый — среда. Покупатель записывает, где проходят звонки, прежде чем записывать что-либо ещё: перрон, улица, офис. Это сразу определяет условия тестирования, поскольку перрон и улица создают разные шумовые условия, а протокол, смешивающий их, даёт результат, с которым никто не сможет работать. Покупатель также записывает, во что обходится программе неудачный звонок: если это функция, которой клиенты перестают пользоваться, проблема заключается в удержании, а не в возвратах.

Шаг второй — список вопросов. Восемь вопросов отправляются поставщику в виде списка. Ответы чётко отделяют поставщика от остальных. В ответ на вопрос о конфигурации микрофонов приходят их количество и метод объединения. В ответ на вопрос об обработке приходят название метода и, что необычно, описание возникающего артефакта. В ответ на вопрос о ссылке на сторонний отчёт приходят метод и дата, а номер документа подтверждается в реестре его составителя. В ответ на вопрос об уровне выходного сигнала приходит числовое значение. Благодаря этому покупатель понимает, что поставщик управляет акустической разработкой, а не просто передаёт таблицу характеристик компонентов. В результате сравнение цен становится сравнением двух разработанных продуктов, а не двух таблиц технических данных.

Шаг третий — базовый уровень и два расстояния. Сначала устанавливается базовый уровень с одинаковыми параметрами, и покупатель фиксирует настройку. На расстоянии одного метра оба кандидата показывают приемлемые результаты, и тест ничего не доказывает — так и должно быть, поскольку это контрольный этап. На расстоянии трёх метров кандидаты разделяются, и различие направлено в сторону, предсказанную ответами поставщика.

Шаг четвёртый — реальный звонок. Реальный звонок оценивает удалённый абонент, который не видит название модели. Один из кандидатов вызывает незапрошенный комментарий покупателя: звонок был чётким. Этого единственного самовольного замечания ценнее, чем оценка разборчивости, поэтому покупатель фиксирует его как наблюдение, не превращая в числовой показатель.

Шаг пятый — улица и ветер. Условия на улице фиксируются при заданном уровне шума, при этом тип шума остаётся одинаковым для обоих кандидатов. Здесь различие больше, чем на расстоянии трёх метров, и именно этот результат меняет решение: разница между двумя продуктами заключается не в чувствительности в тихой комнате, а в обработке шума в среде, для которой продукт действительно приобретается.

Шаг шестой — проверка артефактов. Проверка артефактов проводится отдельно от оценки. Она обнаруживает артефакт пульсации у одного кандидата, который получил высшую оценку разборчивости. В этот момент рейтинг меняется, и покупатель понимает, почему колонка с артефактами должна была находиться в оценочном листе до прослушивания, а не после него.

Шаг седьмой — коммерческая структура. Покупатель выбирает кандидата с лучшей обработкой шума, согласовывает минимальный объём заказа для двух моделей вместо одной, разделяет первую поставку по этапу утверждения образца, чтобы решение по дизайну упаковки последовало за акустическим решением, и включает пункт об уведомлении о любых изменениях прошивки, чтобы последующее обновление обработки не могло незаметно изменить результат.

В результате акустическое решение для программы было принято на основе ранжированной таблицы с пороговыми значениями за одну неделю, до утверждения упаковки. Решающим этапом стало не прослушивание. Решающим было размещение колонки с артефактами в оценочном листе до начала прослушивания.

Что мы публикуем о микрофонах и чего не оцениваем

Здесь сравнение микрофонов имеет смысл проводить только один раз, только по сценарию и только при неизменных переменных; результат следует зафиксировать, чтобы к нему можно было вернуться, когда клиент подаст жалобу. Мы публикуем метод для семейства аудиоустройств Bluetooth, а также возможности компании в области направленного аудио и интеллектуального шумоподавления, но не публикуем характеристики микрофонов ни для одной модели в этом семействе.

Мы не будем приводить отраслевые значения характеристик микрофона для продукта, который не измерили, и не будем выдавать название метода за результат. Мы также прямо укажем пределы любого сравнения: оно устанавливает рейтинг при тех условиях, которые вы тестировали, но не определяет рейтинг в среде, где будет использовать ваш клиент, и не позволяет ранжировать всю совокупность продукции, которую будет поставлять поставщик. Для этого необходим контроль на производстве — эталонный образец, определённая частота тестирования и сторонний отчёт о готовом продукте.

Что отправить нам для получения письменного сценария сравнения

Пришлите две рассматриваемые модели, условия эксплуатации в вашем канале и ценовой диапазон, на который ориентируетесь. Мы подготовим сценарий сравнения с текстом, расстояниями, условиями шума и строками оценочной таблицы, чтобы вы публиковали результаты, основанные на собственных впечатлениях, а не на чужих отзывах. Подробнее — в разделе noise control, альтернативный форм-фактор — open-ear audio, а порядок тестирования образцов — sample evaluation.


Связанные материалы

Назовите две модели и условия эксплуатации — мы подготовим сценарий сравнения.

Чат в WhatsApp
Ваш опыт работы на этом сайте будет улучшен, если вы разрешите использование файлов cookie.