Пять моделей Samsung обошли iPhone по тестам «Роскачества» — можно ли считать исследование объективным?

Некоммерческая организация «Роскачество», учрежденная российским правительством и финансируемая из федерального бюджета, совместно с одним из ведущих мировых испытательных центров провела исследование почти 200 самых актуальных для российского рынка смартфонов. Все продукция условно разделена на три группы (малые и большие смартфоны, а также фаблеты), для каждой из которых были составлены независимые рейтинги. «Большими смартфонами» в данном случае являются устройства, размеры дисплеев которых составили от 4.6 до 5.4 дюйма. Смартфоны, чьи экраны были больше 5.4 дюймов относились к фаблетам, а дисплеи менее 4.5 дюймов — к средним и малым смартфонам.

Кто и где проводил исследование?


Веерное исследование смартфонов по заказу Роскачества и International Consumer Research and Testing проводил крупный немецкий испытательный центр, специализирующийся на измерениях во всех областях акустики, физики и защиты окружающей среды. Каждый представленный в исследовании смартфон попадал на лабораторные испытания в двух экземплярах. Тестирование двух одинаковых смартфонов позволяло наиболее точно определить плюсы и минусы конкретной модели, практически исключая случайный фактор в обнаружении недостатков в отдельном аппарате. Устройства прошли через идентичную испытательную программу, испытания проводились одними и теми же квалифицированными экспертами с применением новейшего оборудования.

По каким параметрам оценивали смартфоны?


В лабораториях на специальном оборудовании тестировали качество сигнала, звука, экрана, ударопрочность, защиту от влаги, уровень излучения и другие технические характеристики. Кроме того, эксперты оценивали и другие потребительские качества продуктов: наличие подробной печатной инструкции, простоту доступа к SIM-карте, microSD, разъему подключения зарядного устройства, легкость первоначальной настройки и последующий доступ к расширенным настройкам, а также удобство использования основных функций. Все это необходимо для того, чтобы убедиться в удобстве работы с устройствами для всех категорий пользователей: начиная молодыми людьми, хорошо знакомыми со смартфонами, и заканчивая представителями старшего поколения, чаще всего далекими от новых технологий.

Какие устройства рекомендует «Роскачество»?


Исходя из общей оценки, наивысшие результаты показали устройства от компании Samsung. В тесте «больших смартфонов» они заняли пять первых позиций. Самой успешной моделью в данном исследовании стал Samsung Galaxy S7 (32 GB) SM-G930F. Смартфон iPhone 6s (16 GB) от компании Apple занял только шестую строчку. В остальном десятку лучших больших смартфонов замыкают флагманские модели LG, Sony, HTC. Хуже всех себя показали модели ZTE Blade L2, Huawei Ascend Y625-U2 и Microsoft Lumia 535.

Что касается фаблетов, безусловным лидером также стал смартфон корейского производства — Samsung Galaxy Note 3 SM-N9005. При этом более новая модель фаблета Galaxy Note 4 SM-N910F – заняла только 5-е место. В пятерку лидеров также вошли фаблеты от Nokia, HTC, LG. Apple iPhone 6s Plus занял лишь 18-ю строчку рейтинга среди фаблетов.


Среди малых смартфонов безусловным лидером оказалась компания Apple. Так, первую строчку рейтинга занял iPhone 5s, третью — iPhone 5c, пятую — iPhone SE. Второе место взял Nokia Lumia 1020. Прочие места в десятке разделили между собой устройства от Samsung BlackBerry и HTC. 11 позицию занял достаточно старый смартфон от компании Apple — это модель iPhone 4s. 

Что не так с этим исследованием? (Обновлено)


Статья отредактирована после получения комментариев пресс-службы «Роскачества». В первоначальном варианте публикации редакция iG отметила, что рейтинг нельзя назвать объективным из-за отсутствия некоторых актуальных моделей смартфонов таких производителей как Apple, Sony, LG, Motorola и HTC, в результате чего Samsung Galaxy S7 имел определенное преимущество над флагманами прошлых лет от других производителей. Представители «Роскачества» связались с редакцией и рассказали, что на текущий момент на официальном сайте представлено первоначально исследование, которое проводилось осенью 2016 года. Некоммерческая организация продолжает работу и проводит тестирование других моделей устройств, на следующей неделе рейтинг будет дополнен смартфонами iPhone 7, iPhone 7 plus, HTC 10, LG G5 SE, Huawei Honor, Sony Xperia XA, LG X Power и некоторыми другими моделями.

В отличие от аналогичных отчетов в других странах, при появлении новых моделей «Роскачество» считает правильным дополнять текущий рейтинг, а не составлять новые. Это позволит не дезориентировать потребителей большим количеством страниц с тестами и результатами. Впрочем, как было указано в первоначальной версии нашей публикации, такой подход имеет сложности с корректным выставлением общего балла на основе «постоянных» и «относительных» характеристик устройств. По таким параметрам как безопасность излучения, эргономика и конструктивные особенности, звук, качество экрана, автономность, устойчивость к повреждениям и воздействию влаги, можно сравнивать любые смартфоны и объективно учитывать их оценки при составлении рейтинга.

В то же время, некоторые особенности устройств могут меняться с течением времени или относительно выхода новых моделей. Например, производительность старых моделей (лидера рейтинга фаблетов Samsung Galaxy Note 3) сейчас не позволяет говорить о положительном опыте использования, поскольку отстает от актуальных требований разработчиков приложений и игр к «железу». Кроме того, часть оценок смартфонов, например легкость первоначальной настройки и базовая функциональность меняются в течение жизненного цикла вследствие обновлений программного обеспечения. Но в то же время наступает момент, когда смартфоны перестают получать новые прошивки и даже обновления безопасности, что должно ухудшать их показатели.

В редакции iG мы считаем, что критерии, подобные особенностям программного обеспечения и производительности, должны иметь другой «вес» при выставлении итоговой оценки смартфонам, а также  меняться с течением времени. В то же время постоянно отслеживать и поддерживать актуальность этих показателей для сотен моделей устройств слишком трудоемкая и сложная задача. Как следствие, при выборе смартфонов по оценкам «Роскачества» мы советуем не обращать внимания на итоговую оценку и место в общем зачете, а ориентироваться на отдельные показатели, по которым можно получить действительно объективные и актуальные оценки, а позволяет сравнить их с другими моделями безотносительно жизненного цикла.

В комментариях мы предлагаем обсудить проблему составлений рейтингов актуальных (имеющихся в продаже) устройств с учетом разных годов выпуска, изменений в программном обеспечении и требований к производительности. Расскажите, каким вы себе представляете объективный рейтинг качества смартфонов?