Профессиональные обзоры и лабораторные измерения отвечают на разные вопросы и должны дополнять друг друга, а не рассматриваться как взаимозаменяемые.
Отделяйте опыт от измерений
Профессиональный обозреватель может описать удобство обращения, комфорт, управляемость, затраты усилий на обслуживание, пригодность для конкретной задачи и другие впечатления, полученные в ходе использования. Эти оценки могут быть ценными, поскольку дают практический контекст, но они по-прежнему связаны с обозревателем, образцом, задачами и обстоятельствами. Такие характеристики, как удобный, сбалансированный или простой в использовании, не являются лабораторными измерениями.
Лабораторные данные могут описывать измеренные свойства, полученные по указанной методике. Они могут обеспечивать воспроизводимость и контролируемые условия, но не предсказывают автоматически опыт каждого пользователя. Измеренный результат не следует использовать для того, чтобы отвергать личное наблюдение обозревателя, а положительный обзор не следует переписывать как доказательство измеренного свойства.
Проверяйте, что именно охватывает каждый источник
Для обзора определите точную версию продукта, источник образца, состояние образца, выполненные задачи, продолжительность использования и любые раскрытые коммерческие связи. Прочитайте обзор полностью, а не полагайтесь на оценку или выбранное предложение. Для лабораторной информации определите протестированный образец или партию, методику, единицы измерения, условия, критерии приемки и ограничения отчёта.
Отбор образцов также ограничивает интерпретацию. В NIST Engineering Statistics Handbook отмечается, что приемочный контроль по выборке предназначен для принятия решения о том, является ли партия, вероятно, приемлемой, а не для оценки общего качества партии. В более широком смысле любой результат следует читать с учётом заявленной цели отбора образцов. Это общее руководство по измерениям, а не доказательство в отношении продукта SEWARD.
Ищите совпадение, не навязывая согласие
Наиболее обоснованное прочтение связывает каждое утверждение с вопросом, на который оно может ответить. Обозреватель может сообщить, что определённая особенность показалась неудобной при выполнении конкретной задачи, тогда как лабораторные данные могут установить отдельный физический показатель. Эти результаты не обязательно противоречат друг другу.
Согласие между независимыми свидетельствами может повысить уверенность, но расхождение должно побуждать к проверке версий, образцов, задач и методов. Пока эти факторы не согласованы, сохраняйте оба результата с их ограничениями, а не объявляйте, что один автоматически отменяет другой.