- PVSM.RU - https://www.pvsm.ru -
По производственной необходимости возникли два следующих вопроса: как определить эффективность существующего набора устройств для тестирования приложения под Android и как правильно сделать выбор следующего устройства для тестирования.
После небольших размышлений я принялся рыть интернет в поисках решения этой проблемы, но готового решения так и не нашел (это было около полугода назад). Зато нашлось достаточно теории и описания опыта в этом направлении.
Три наиболее полезные ссылки с описаниями стратегий по выбору устройств для тестирования расположены в конце статьи.
Все описанные там стратегии можно свести к общей теории, заключенной в следующих трех пунктах:
Далее, в зависимости от проекта, каждый выбирает для себя определяющие факторы или их комбинации.
Параметры, которые учитывают практически все блоггеры — это версия Android, PPI и разрешение экрана. Для web-проектов важным, наряду с перечисленными параметрами, является браузер. Для тяжелых нативных приложений не менее важным является быстродействие… и так далее…
Наиболее логичной и простой стратегией мне показалась теория popular and cheap (популярные и дешевые).
Вооруженный знаниями, я приступил к действиям.
Проектом, для которого были применены полученные знания пользуется приблизительно 1000 моделей мобильных устройств ежедневно более 2 миллионов раз. Причем имелась статистика по количеству посещений для каждого устройства.
Этап сбора данных об устройствах оказался самым трудозатратным. Я собрал информацию в интернете о 123 популярных устройствах, дополняя документ версиями Android, CPU, размерами экранов, разрешениями и PPI для каждого устройства. Эта работа заняла около недели.
Оказалось, что 123 из 1000 устройств покрывают 80% посещений, и на этом я решил остановиться.
Этап анализа данных был наиболее интересным. Отметив уже имеющиеся устройства (их было 7) для тестирования в таблице, я приступил у группировкам по различным параметрам.
Группировка по major.minor версии Android показала, что для тестирования покрыты все группы начиная с 4.2 до 2.2 (76% посещений) и только устройства с версией Android 2.1 (2.95% посещений) и 1.x (0.28% посещений) не покрыты. В целом, результат неплохой.
Анализ по разрешениям показал, что второе по популярности разрешение 480x320 с 18.61% посещений никогда не проверялось. В тоже время самая популярная группа с разрешением 800x480 (27.56%) покрыта 3 устройствами.
Анализ по версиям Android и разрешениям экранов дал более интересные результаты. Три самые популярные группы 2.3 и 800x480 (15.30%), 2.3 и 480x320 (11.83%), 4.1 и 1280x720 (10.75%) вообще не покрыты. При этом суммарное покрытие набором устройств для тестирования составляло всего 8% посещений.
В результате был выдвинут ряд предложений, которые смогли значительно увеличить покрытие посещений по основным параметрам устройств.
На этом мои изыскания в этой области приостановились.
Недавно я вернулся к этому вопросу, работая над новым проектом. Если честно, перспектива собирать информацию об устройствах меня не радовала.
Один коллега сохранил мне кучу времени, поделившись ссылкой choosedevice.com [1]. Это оказалось готовое автоматизированное решение. В этом проекте уже собрана информация более чем по 200 устройствам, но только по 4 параметрам: api level (os version), размер экрана, PPI и разрешение экрана. Видно, что этот проект еще молод и сейчас находится в стадии beta тестирования.
Вот какой получился опыт при работе с этим сервисом:
Все это заняло 10 минут, и я получил общую статистику по мобильным устройствам.
Дальше я использовал панель поиска для группировки устройств.
Система подсчитала покрытие посещений пользователей по выбранному параметру и выдала рекомендуемые устройства.
Группировать можно также по двум параметрам. Ниже представлен результат работы сервиса по ppi/resolution.
Android устройство действительно необходимо выбирать с умом. ChooseDevice поможет сделать это качественно.
stephanierieger.com/strategies-for-choosing-test-devices/ [2]
devblog.xing.com/qa/how-to-choose-the-right-mobile-test-devices/ [3]
mobilephonedevelopment.com/archives/1600 [4]
developer.android.com/about/dashboards/index.html [5]
developer.android.com/guide/practices/screens_support.html [6]
choosedevice.com [1]
Автор: gmaksimenko
Источник [7]
Сайт-источник PVSM.RU: https://www.pvsm.ru
Путь до страницы источника: https://www.pvsm.ru/testirovanie/34166
Ссылки в тексте:
[1] choosedevice.com: http://choosedevice.com
[2] stephanierieger.com/strategies-for-choosing-test-devices/: http://stephanierieger.com/strategies-for-choosing-test-devices/
[3] devblog.xing.com/qa/how-to-choose-the-right-mobile-test-devices/: http://devblog.xing.com/qa/how-to-choose-the-right-mobile-test-devices/
[4] mobilephonedevelopment.com/archives/1600: http://mobilephonedevelopment.com/archives/1600
[5] developer.android.com/about/dashboards/index.html: http://developer.android.com/about/dashboards/index.html
[6] developer.android.com/guide/practices/screens_support.html: http://developer.android.com/guide/practices/screens_support.html
[7] Источник: http://habrahabr.ru/post/179531/
Нажмите здесь для печати.