Original text in Russian. You can translate text of Google. The original text in
Russian page.
Тестирование продуктов в Reference Audio Analyzer
Стандартное тестирование подразумевает типовые измерения с публикацией отчетов и участия продуктов в on-line сервисах. Мы проводим тестирование различных аудио продуктов: наушников, усилителей, плееров, смартфонов, планшетов, ЦАП-ов и прочих устройств. Результатом тестирования становятся отчеты с графиками и подробными характеристиками как для профессионалов, так и для простых потребителей.
На основе измеренных характеристик продукт участвует в сервисах подбора продуктов по наилучшему сочетанию.
Дополнительно для заказчика может быть проведено индивидуальное пояснение отчетов.
Профессиональные отчеты
Профессиональные отчеты содержат полную информацию о продукте с подробными графиками и характеристиками.
Примеры отчетов:
On-Line сервисы сравнения
Помимо прямого сравнения АЧХ и прочих параметров продуктов, измеренных в RAA, предлагаются on-line сервисы для анализа совместной работы наушников и источников - построения общей АЧХ и анализа их совместимости по чувствительности и мощности. Мы разработали алгоритм расчета итоговой АЧХ при совместной работе наушников и усилителя. Нам достаточно измерить отдельно наушники и отдельно усилитель и, потом, в любой момент, мы можем получить результат их совместной работы.
Примеры:
Мы постоянно разрабатываем новые сервисы on-line и большинство ранее протестированных продуктов в них учавствуют автоматически, не требуя повторных измерений.
Отчеты для "чайников"
Это упрощенные отчеты для слабо разбирающихся в характеристиках и специализированных графиках пользователей. Информация представлена просто и наглядно. Интерпретация данных максимально упрощена и, соответственно, лишена тонкостей и нюансов. Этого достаточно для общей оценки аудио-продукта. Для более полного и точного представления следует изучать профессиональные отчеты.
Мы сделали разделение отчетов на «простые» и «сложные». Где простой отчет, с поясняющими комментариями, позволит постепенно понять и научиться «читать» профессиональный отчет.
Приведем аналогию: например, при выборе новой видеокарты для компьютера, многим непонятны множество таблиц с итоговыми данными тестовых пакетов. Как понять разницу в этих итоговых цифрах и оценить её? В большинстве случаев неподготовленный читатель довольствуется лишь словесной оценкой автора, не вникая в цифры. Если выбор продукта проводится основательно, то читатель постепенно углубляется в сложные таблицы и осваивает информацию от простого к сложному.
В отчетах для «чайников» приводится таблица рекомендаций «со звездочками» по совместимости типовых наушников и источников. Таблица рекомендаций рассчитывается по измеренным характеристикам, с учетом условий окружающей среды.
Примеры отчетов:
On-Line подбор
На основе алгоритмов расчета "звездочек" в таблицах работают и отдельные сервисы on-line подбора конкретных моделей продуктов.
Примеры подбора для конкретных моделей:
Общие вопросы
Каков порядок проведения тестирования?
Лаборатория находится в Москве. Стоимость тестирования зависит от количества продуктов и их типа. Не считая времени на транспортировку и оформления документов (при необходимости договора услуг, выставления счета и т.п.), тестирование с формированием отчетов обычно занимает несколько дней. После проведения тестирования продукты возвращаются назад.
На усмотрение заказчика образцы могут остаться у нас и в этом случае после разработки и введении новых типов тестов для этих продуктов будут проведены повторные измерения. Это актуально для продуктов с долгим циклом жизни.
Что будет, если при тестировании обнаружится брак или баг?
Если образец бракованный
В случае брака мы не публикуем отчет, а меняем образец на исправный для повторного тестирования.
Если выявляются баги
Решение о публикации отчетов остается за заказчиком.
Мы показываем отчеты до публикации и даем общие комментарии о продукте и полученных характеристиках. В случае обнаруженных багов, например в плеерах или смартфонах, ситуация обсуждается отдельно в зависимости от бага. Могут быть варианты:
-
Публикация отчета сразу с подробным комментарием.
Обычно, если баг не критичен, например неверные названия цифровых фильтров, перепутанные названия каналов, то отчет по согласованию может быть опубликован сразу с комментарием, как на самом деле называется тот или иной режим.
-
Публикация отчета с задержкой и комментарием.
Если обнаруженные баги более критичны, но их можно исправить в следующей прошивке, то публикация отчета может быть отложена на заранее оговоренный срок. Если в следующей прошивке будет исправление, то продукт будет еще раз протестирован. Если срок вышел, а прошивка не обновилась, то может быть опубликован отчет с подробным комментарием.
-
Отсутствие публикации.
Если баг серьезен, а его исправление маловероятно и не хочется это выставлять напоказ, то для такого продукта отчет может быть не опубликован. Но это относится только к образцу, предоставленному от заказчика. Если тестирование этого продукта будет отдельно заказано другим заказчиком (например потребителем), то отчет для предоставленного продукта другими заказчиком появится в базе измерений. В такой ситуации лучше всего опережать пользователей еще на этапе прототипных устройств, т.к. это дает фору на исправление возможных багов.
Варианты багов, которым желательны комментарии:
-
Неоптимальный уровень на выходе устройства, приводящий к клипированию. В этом случае будет комментарий с пояснением, как снизить или устранить влияние этого бага. Например, какой уровень громкости в настройках плеера выставить для линейного выхода, отключив настройку фиксированного уровня или как оптимально снизить уровень через настройки эквалайзера.
Наличие пояснений позволяет снизить отзывы о плохом звучании устройств, т.к. потребителям становится понятно, как избежать слышимых проблем.
Если компания не производит продукты высокого класса, то есть ли смысл в тестах, где продукт заведомо не будет самым лучшим?
В RAA нет подхода в виде разделения всего на черное и белое или выявления только абсолютных чемпионов. В зависимости от внешней ситуации в виде индивидуальной совместимости с внешним оборудованием, целей применения и личных предпочтений ранжирование по качеству всегда разное.
Мы подходим к характеристикам сбалансировано и выявляем условия, в которых продукт получается оптимальным выбором. По этой причине не страшно, что какая-то характеристика у конкурента может оказаться "лучше", это значит, что в определенной ситуации будет хорош один продукт, а в другой ситуации альтернативный продукт. И нашей задачей является выявление условий, которые будут оптимальны для продукта.
Плюсы от наличия протестированных продуктов
Полный набор характеристик
Наша аудитория - это пользователи, которым важны подробные и понятные характеристики.
В большинстве случаев характеристики от производителей не полные (или не всем пользователям понятные). Это затрудняет для потребителя сделать прямое сравнение продуктов или понять их взаимодействие (например плеера и наушников). Наличие протестированного продукта - это доступная и полная информация.
Каждая компания делает фокус на определенную "свою" целевую аудиторию со своими пояснениями преимуществ для своих продуктов. Характеристикам же обычно уделяется второстепенное место. Отчеты в базе RAA позволяют взаимодействовать с "остальной" целевой аудиторией.
Неподкупность
У покупателей может возникать опасение, что производитель может воспользоваться своей известностью и предложить новые продукты с меньшим качеством и большей ценой, а восторженные субъективные отзывы банально "проплатить".
Наличие результатов объективного технического тестирования показывает, что производитель не опасается за реальное качество своей продукции. А вот отсутствие подробной объективной и независимой информации может быть следствием сокрытия недостатков.
Все отчеты автоматически строятся по единой методике без вероятности подправить данные в "лучшую сторону" и соответственно заслуживают доверия в отличии от обычных обзоров, где зачастую демонстрируется тот график, который соотвествует цели материала (похвалить или поругать).
Новинки
Обычно, при создании новинок идет подготовка к ее появлению на рынке, предварительные семплы рассылаются в СМИ под NDA и устанавливается дата, с которой возможны публикации. Это позволяет вовремя подогреть рынок и сократить время узнавания новинки покупателями.
При предварительном тестировании в RAA отчеты будут закрыты для обычных посетителей, но открыты для СМИ, которые в своих обзорах смогут сослаться на результаты измерений от независимого источника.
Потребители в свою очередь будут сразу владеть полной информацией о продукте, а не ждать нужной им информации спустя продолжительное время после появления продукта в продаже.
Для малоизвестного бренда
Все продукты тестируются как "черные ящики" без скидок на "бренд". Благодаря сервисам прямого сравнения характеристик продуктов и подбора по совместимости, малоизвестный бренд показывается наравне с известными брендами и такое соседство позволяет повысить узнаваемость.
Единая методика измерений
Измерения продуктов могут проводится самыми различными специалистами и на совершенно разном оборудовании. На сегодняшний день не существует единого стандарта и единственно верного стенда для измерений. По этой причине результаты измерений несопоставимы при тестировании в разных условиях.
За счет измерений продуктов в лаборатории RAA по единой методике и в одинаковых условиях результаты тестирования возможны для прямого сравнения.
При изучении графиков, пользователь пытается понять, как графики соотносятся с субъективным звучанием. При этом абсолютные значения, показанные на графиках, не всегда понятны, т.к. зачастую нет "исходной точки отсчета". За счет огромного количества протестированных продуктов в базе RAA возможно выбрать знакомый продукт в качестве исходной точки отсчета.
Мы приводим характеристики не только в общепринятых стандартах для инженеров, но и в значениях, которые можно сразу подставить в большинстве программ (эквалайзерах, значениях громкости).
Примеры с прямым сравнением дают легко понять разницу между продуктами:
-
При сравнении двух моделей наушников можно например увидеть, что одни из них более басовитые. Например одна из этих моделей наушников есть у пользователя. Соответственно, при помощи эквалайзера в программном плеере (в компьютере или смартфоне) можно добавить аналогичное изменение АЧХ и понять, как будут звучать вторые наушники! При сравнении же графиков, сделанных в разных условиях такое сделать невозможно.
-
При сравнении источников по громкости, например при выборе смартфона, у нас можно увидеть конечные цифры в децибеллах и аналогично в настройках громкости плееров и прочих устройств оценить, насколько именно этот смартфон будет громче или тише.
Неверный выбор, обманутые ожидания и исправление репутации
Нередка ситуация, когда пользователь покупает хороший продукт, но результат сильно разочаровывает. Зачастую проблема не в качестве продукта, а несовместимости с остальными продуктами или его предназанчением для других целей.
Пользователь же воспринимает продукт низкокачественным, как не оправдавшим ожиданий. Такое часто случается при покупке более дорогого продукта, где вместо качесва "вверх" получается наоборот "вниз".
Покупатель обычно старается найти подтвержение, что купил "плохой" продукт и ищет всю возможную информацию. Благодаря найденным нашим подробным отчетам по своему продукту, пользователь может лучше узнать о взаимосвязи параметров и выяснить, что проблема заключается в неоптимальном выборе. Продукт для него лучше не станет, но будет понимание, что проблема не в качестве, а неверном выборе, аналогично покупке спорткара, который плохо едет по грунтовой дороге.
Покупатель, не разобравшись в ситуации порой оставляет свое веское слово в отзывах, где вся вина приписывается исключительно продукту или бренду. Информация из наших отчетов часто цитируется на различных форумах, и если недовольный пользователь в праведном гневе поделится своей печалью, предупреждая остальных о "плохом продукте", то другие участники смогут его переубедить, сославшись не только на свое восприятие, но и на объективные данные в отчетах RAA.
Примеры "проблем" неверного выбора
Звук тихий или наоборот слышен сильный шум
Иногда при подключении новых наушников к смартфону пользователь замечает шум, которого "со старыми наушниками не было". Или новые наушники оказались тихими, в то время как "старые дешевые были громче".
Это примерно как включить пониженную передачу в автомобиле и стараться развить высокую скорость или наоборот на повышенной передаче стараться медленно ехать. Результат ужасен, но плохой ли автомобиль от того что выбрана неверная передача? Аналогом этой "передачи" является взаимодействие чувствительности наушников и мощностных параметров источника.
Мы тестируем чувствительность у наушников, мощностные характеристики источников и с помощью разработанных у нас алгоритмов позволяем сделать оценку на совместимость. Позволяем предположить, в каких условиях продукт покажет себя наилучшим образом. Если пользователь поймет, в чем именно проблема, то он сможет уже выбрать следующий продукт с учетом значимых характеристик, а не просто на удачу с альтернативным брендом.
Пропал бас или его стало слишком много
При подключении наушников к источнику общая АЧХ индивидуально меняется не так, как их сумма по отдельности. Иногда это становится неприятным сюрпризом, когда изменения для пользователя происходят "не в ту сторону". Иногда это воспринимается как "у друга эта модель была качественной, а у меня видимо брак или качество плавает от экземпляра к экземпляру".
Восприятие баланса частот является разным и в зависимости от уровня громкости и внешнего шума, что не всегда учитывают при покупке. В магазине звучало хорошо, на улице уже звук другой, а дома впечатления иные. Кто виноват в этой ситуации?
Отчеты позволяют дать на это ответы и подходить к покупке более взвешенно.
Купил дорогой внешний USB–DAC к смартфону с усилителем, а звук еще хуже стал, чем со смартфона
В большинстве случаев система Android не позволяет по умолчанию выводить звуковой поток в первозданном виде и добавляет слышимые искажения. Различные плееры по-разному выводят звук для штатного кодека и внешнего устройства, подключенного по USB. При тестировании смартфонов мы уделяем внимание, какие плееры с этим смартфоном способны воспроизвести звук без дополнительных искажений (и соответственно с какими настройками).
Original text in
Russian page.
Translation page is not yet ready
You can help with translation via the:
debug info
time=0.079010009765625
