Испытания проводились по 180 критериям. Во время исследования специалисты использовали приложения как рядовые пользователи: используя фильтры, искали продукты из стандартной потребительской корзины, просматривали карточки товаров, собирали и оформляли заказ, ожидали доставку и анализировали функциональность приложений на каждом этапе этого процесса. Ассортимент и качество доставляемых продуктов, а также сервис самой доставки в ходе исследования не оценивались. В будущем Роскачество планирует проверить качество продуктов питания, которые потребители заказывают онлайн.
Топ приложений для заказа продуктов на дом читайте ЗДЕСЬ.
Также проводился дополнительный тест приложений на безопасность с использованием специализированного ПО. В результате были проверены все ключевые функции, оценены удобство, информационная безопасность, производительность и надежность приложений доставки продуктов.
Каждый из критериев получил свой «вес» (то есть определенное влияние на итоговый балл) в зависимости от своей значимости, что позволило в итоге сформировать максимально объективную оценку. Некоторые критерии оценивались без веса, соответствующие преимущества указаны в карточках приложений.
Функциональность
Одна из самых важных потребительских характеристик любого мобильного приложения – это функциональные возможности. В этом исследовании соответствующая группа параметров испытаний (115 критериев) составила 35% от итоговой оценки приложений.
Половина приложений получили на обеих платформах оценки в 4 балла и более, из чего следует, что все участники исследования обладают сопоставимо высокой общей функциональностью, отличаясь только в деталях. Впрочем, детали для пользователей порой оказываются очень важны. Так, по данным опроса, проведенного среди подписчиков Роскачества, подавляющее большинство респондентов (56%) обращает внимание на состав при выборе товара. 27% смотрят на бренд. Относительно небольшая доля пользователей (12%) изучает фотографии товаров. Меньше всего внимания ответившие уделяют энергетической ценности продукта – КБЖУ (5%).
Пройдемся подробнее по наиболее важным функциям.
Регистрация – в большинстве приложений (57%) не обнаружилось возможности зарегистрироваться через уже имеющиеся аккаунты в социальных сетях или сторонних сервисах, что может быть неудобно для пользователя. Аутентификация с помощью номера телефона реализована у всех. Полноценная регистрация с помощью почтового аккаунта есть у «Яндекс.Еды», «Яндекс.Лавки» и Ozon.
Поиск – ключевая группа критериев, по которой оценивалась функциональность приложения как в основных, так и в дополнительных аспектах. Поиск продуктов, естественно, является важнейшим для пользователя.
Наряду с поиском вручную через поисковую строку, эксперты оценили наличие голосового ввода (только у «Ленты Онлайн»), подсказок ранее введенных запросов (есть у 25% приложений) и релевантных подсказок при вводе поискового запроса (есть у Ozon Express и METRO).
Следующий важный для пользователей момент – фильтры, по которым можно настроить желаемые товары (бренд, цена, производитель, страна производства, вес). Здесь близкие к максимальным (4 и более) баллы набрали только оба приложения от «Перекрестка», Ozon Express и METRO (для iOS). Половина приложений получили низкие оценки за фактическое отсутствие фильтров (поиск только по бренду или даже без него). Только у 39% приложений есть фильтр по стране производства, только у 29% – по весу.
Дополнительно, без баллов, оценивались наличие уникальных фильтров для конкретных категорий продуктов (жирность, фасовка, вкус, вид упаковки, минимальный возраст ребенка и т. д.) и фильтрация по особенностям товара (например, отсутствие лактозы или сахара, примечания, подходит ли продукт вегетарианцам). Обе категории фильтров есть примерно у половины приложений.
Сортировка – группа критериев, которая позволяет расположить удобным для принятия решения образом продукты в результатах поиска. Оценивалась возможность отсортировать товар по возрастанию и убыванию цены (есть у 64% приложений). Без оценки проверялось также наличие рейтинга товаров и возможность отсортировать результаты по этому рейтингу: Ozon Express оказался единственным из 14 приложений с такой функцией.
Карточка товара – в эту большую группу критериев вошли всевозможные детали о товаре, которые могут понадобиться пользователю: название, цена, описание, объем/вес, состав, срок и условия хранения, производитель/изготовитель, бренд, а также наличие фотографий и возможность их развернуть во весь экран. Оценивались наличие в составе показателей КБЖУ (энергетическая ценность), отзывы и рейтинги товаров.
Большинство приложений (64%) получили оценку выше 4 баллов за хорошо заполненные, детальные карточки продуктов. Больше всех выделились «Перекресток Впрок» и «Лента Онлайн».
Описание продукта отсутствует в приложениях «Пятерочка Доставка», «Яндекс.Лавка» и «Магнит». Только в 36% приложений можно развернуть фотографию товара на весь экран. В Delivery Club нет информации о КБЖУ продукта. Отзывы и рейтинги отсутствуют в 61% приложений, в METRO есть только рейтинги без отзывов, в остальных наличествует и то и другое.
Без влияния на балл также проверялись необязательные, но полезные функции: отображение количества товара в упаковке, артикул, сорт, габариты, оставшееся количество в наличии и возможность добавить фото к отзыву (где есть отзывы). Наибольшее количество дополнительных элементов в карточке товара – у Ozon Express, достаточно много их у Metro и «Ленты Онлайн». Самой редкой необязательной функцией оказалась возможность прикрепить фото к отзыву (только Ozon Express).
Отображение в корзине примененной скидки к товарам и общей стоимости отсутствует у «Магнита» и «Яндекс.Еды», также у «СберМаркета» и METRO, но только для iOS.
Оформление заказа лучше всего реализовано у сервисов «СберМаркет», «ВкусВилл» и «Пятерочка Доставка», получивших 5 баллов. Половина приложений дают возможность оставить комментарий при оформлении или выбрать условия при заменах в заказе (если продукт отсутствует). Только в 46% приложений можно самостоятельно выбрать время и дату доставки продуктов.
Номер заказа не отображается у «Яндекс.Лавки» и Delivery Club. Время ожидания отсутствует у приложения «Перекресток – Доставка». Отмены заказа нет у Delivery Club и «Моего Ашана». Способ оплаты отображается только у половины приложений.
Без влияния на итоговый балл проверялись отображение курьера на карте (есть только у «Яндекс.Еды» и Delivery Club), возможность оценить доставленный заказ и оставить на него отклик, позвонить курьеру или оставить ему чаевые за оперативное выполнение заказа (последнее – самая редкая функция, менее чем у половины приложений). Больше всего дополнительных возможностей у сервисов «СберМаркет», «Перекресток Впрок», «ВкусВилл» и Ozon Express.
Полнота способов оплаты реализована у «Яндекс.Лавки» и «ВкусВилла» – единственных приложений, в которых для удобства пользователя можно отсканировать карту. Наиболее ограниченная функциональность оплаты у приложений «Мой Ашан» и METRO, где нет возможности привязать несколько карт или использовать альтернативный способ оплаты (например, Google Pay). Оплата картой курьеру или наличными есть только у «ВкусВилла» и Ozon Express, у METRO также есть опция оплаты наличными.
Адрес доставки позволяют гибко настроить большинство приложений, за исключением Ozon Express, в котором нельзя определить через геолокацию местоположение пользователя или выбрать его на карте вручную. Проблемы с масштабированием карты есть и у «Моего Ашана» (но не с геолокацией). Детали адреса доставки наиболее полно позволяет кастомизировать «Лента Онлайн». Без влияния на балл оценивалась возможность выбрать конкретный магазин сети или точку самовывоза, обе эти функции есть у приложений «ВкусВилл», «Мой Ашан» и «Перекресток – Доставка», также точка самовывоза реализована у сервисов «Перекресток Впрок» и METRO.
Наиболее информативная история заказов – у приложений «Перекресток – Доставка», «ВкусВилл» и Ozon Express. Часто в приложении нельзя посмотреть чек (есть лишь у 36%), сортировка заказов есть только у «Ленты Онлайн» и «Моего Ашана». Возможность повторить заказ есть у всех, кроме приложений «Магнит», «Пятерочка Доставка» и «Яндекс.Лавка».
Профиль пользователя одинаково гибок к настройке у всех приложений, кроме iOS-версии «СберМаркета», где нельзя изменить имя, телефон и e-mail (в Android-версии такая функция есть).
Настройки у 36% приложений отсутствуют, у остальных реализованы на одинаково высоком функциональном уровне. Только в «Моем Ашане» есть возможность установить пин-код на вход в приложение. Из необязательного: «ВкусВилл» позволяет заранее отказаться от бумажного чека, а «Перекресток – Доставка» автоматически подстраивает яркость приложения.
Использовать приложение без авторизации позволяют все, кроме приложений «Перекресток – Доставка» и «Мой Ашан». Поделиться карточкой товара дают 29% приложений. Уведомление о появлении ранее отсутствовавшего в наличии товара есть у «Ленты Онлайн» и Ozon Express, список покупок – у «ВкусВилла», «Ленты Онлайн» для iOS и Ozon.
Без влияния на балл оценивалось наличие рецептов и сканера штрихкодов (обе функции есть менее чем у половины приложений). Очень редкой функцией оказалась статистика расходов пользователя (есть только у «ВкусВилла»).
По результатам тестирования наиболее функциональными приложениями признаны «ВкусВилл», Ozon и «Перекресток Впрок» на обеих платформах.
Удобство пользования
Простота и удобство пользования мобильными приложениями оценивались экспертами по 29 критериям, которые составили в сумме 20% от итоговой оценки приложений.
При оценке простоты и качества навигации эксперты определяли, насколько легко понять, где пользователь находится, находился и куда он может переместиться в дальнейшем, а также подсчитывали минимально необходимое количество действий (кликов) для выполнения основных пользовательских сценариев. В их числе: переход в избранное, в корзину, к началу поиска товаров, добавление товара в корзину без входа в его карточку, наличие индикатора загрузки и так далее. Со значительным отрывом самым удобным приложением по итогам тестирования на обеих платформах стал «ВкусВилл», самым сложным в навигации – «Магнит». Выбор формата представления товаров (витрина, таблица, «плитка», список) есть только у Ozon Express. Только в «Самокате» реализована кнопка, возвращающая на верхнюю часть списка каталога.
Помощь в приложении полностью (чат, справка, форма обратной связи) реализована только у «ВкусВилла» и «СберМаркета».
Большинство приложений хорошо показали себя в плане адаптации для пользователей с ограниченными возможностями (наличие динамического шрифта и Voice Over / TalkBack). Не полностью эти функции реализованы у трех приложений на Android («Перекресток – Доставка», «Самокат» и «СберМаркет») и у большинства приложений на iOS из-за особенностей платформы.
Наиболее удобными приложениями в итоге были признаны «ВкусВилл», «Мой Ашан» и METRO (Android), «ВкусВилл», «Мой Ашан» и «Яндекс.Еда» (iOS).
Производительность и надежность
Данная группа составила 15% от общей оценки. Практически все приложения в ходе тестирования набрали больше 4 баллов и зарекомендовали себя как стабильные и надежные, устойчивые к внешним прерываниям.
У большинства приложений (кроме сервисов «Пятерочка Доставка» для обеих платформ и «Магнит» для iOS) были сняты баллы за большой размер приложения как в версиях на Android, так и на iOS (более 100 МБ).
Информационная безопасность
Информационная безопасность для сервисов доставки продуктов имеет значительную важность, так как при перехвате данных или взломе аккаунта могут быть скомпрометированы персональные и платежные данные пользователя. Группа из восьми критериев составила 15% в общей оценке.
Отдельно анализировалась безопасность передачи данных приложения и пользовательских данных. Для этого эксперты производили захват всего трафика, который пересылает приложение, с помощью специализированного ПО (Wireshark), а затем анализировали его на наличие незашифрованных данных.
Все исследованные приложения показали высокий уровень безопасности, запрашивают только необходимые разрешения, передают собственные данные и данные пользователя в зашифрованном виде. «Мой Ашан» получил дополнительные баллы как единственное приложение, позволяющее защитить вход паролем.
Дополнительно к параметрам, проверенным в ходе исследования, эксперты Роскачества провели проверку всех приложений на Android анализатором на наличие уязвимостей и НДВ Solar appScreener при использовании технологии автоматического бинарного анализа, без осуществления реверс-инжиниринга (декомпиляции исходного кода).
В итоге были выявлены следующие потенциальные уязвимости:
-
Обращение к DNS в 64% случаев, небезопасная рефлексия выявлена у 50% исследованных приложений.
-
Небезопасная собственная реализация SSL – 57%.
-
Слабый алгоритм хеширования у 78% исследованных приложений, использование незащищенного протокола HTTP – 85%.
-
Внедрение в запрос к базе данных SQLite – 7%.
На платформе iOS ситуация выглядит следующим образом:
-
использование буфера обмена – 92%.
-
Слабый алгоритм хеширования и слабый алгоритм шифрования были выявлены у 28 и 49% исследованных приложений соответственно.
Анализ уровня защищенности мобильных приложений для доставки еды не выявил серьезных проблем безопасности. Тем не менее доверять онлайн-сервисам свои личные данные, такие как адрес, телефонный номер и номер банковской карты, следует с осторожностью. Защищенность приложения означает, что ПО не взломать известными методами. При этом нельзя оставлять без внимания безопасность сервера, которую обеспечивает поставщик услуг. Если уровень защиты сервера, куда передаются персональные данные, невысок, существует вероятность утечки. Учитывая чувствительный характер обрабатываемых данных, это может привести к критическим последствиям.
Правовая оценка
Проверку на соответствие политик конфиденциальности приложений доставки продуктов требованиям закона «О персональных данных» (№ 152-ФЗ от 27.07.2006) проводили юристы автономной некоммерческой организации «ПравоРоботов». В этом исследовании соответствующая группа из 16 параметров испытаний традиционно составила 10% от итоговой оценки приложений.
Юристы проанализировали политики на соответствие российскому законодательству, а также проверили их по нескольким необязательным с точки зрения законодательства, но важным для пользователей критериям, таким как условия прекращения обработки персональных данных, указание ответственных за их сбор лиц, сторон, которым они передаются, а также наличие глоссария и русскоязычной локализации в пользовательской документации сервисов.
Большинство исследованных приложений показали хорошие результаты, набрав 4 балла и выше. Однако у юристов возникли вопросы к политикам конфиденциальности в части обработки персональных данных к трем приложениям («Пятерочка Доставка», «Лента Онлайн» и «Магнит»), у которых за это были снижены баллы.
С началом пандемии коронавируса и сопутствующих ей ограничений мы в один момент внезапно оказались в долгожданном цифровом будущем, когда такие привычные и отнимающие достаточно много времени вопросы, как поход в магазины, были делегированы различным сервисам доставки. И надо отметить, что почти все известные сетевые магазины смогли оперативно перестроиться и либо самостоятельно внедрить у себя сервис доставки, либо отдать данный вопрос на аутсорсинг крупным операторам. Однако, как показывает практика, техническая сторона вопроса всегда реализуется быстрее, чем ее другая, не менее значимая часть, и в нашем случае это подход к обработке персональных данных, которые обязательны к передаче пользователями. Так, «Пятерочка Доставка» предлагает политику конфиденциальности, которую последний раз редактировали в 2015 году, и к тому же которая «политикой» то и не является, а скорее пересказом 152-ФЗ о персональных данных. «Магнит» решил обойтись просто перечнем работы с приложением, выдавая пользовательское соглашение за политику конфиденциальности. «Лента Онлайн» решила вместо политики конфиденциальности опубликовать некое подобие меморандума. Таким образом, без сомнения, всем нашим ритейлерам стоит провести ревизию свои правовых документов в целом и политик конфиденциальности в частности, если они хотят и дальше масштабировать свой сервис.
Негативные и позитивные аспекты политик конфиденциальности, на которые юристы рекомендуют обратить внимание, более подробно приведены в карточках каждого из приложений.
Выводы
Лучшими по совокупности всех критериев признаны:
iOS:
-
«ВкусВилл» (4,53)
-
Ozon Express (4,26)
-
«Перекресток – Доставка» (4,21)
-
«Перекресток Впрок» (4,20)
-
«СберМаркет» (4,12)
Android:
-
«ВкусВилл» (4,53)
-
Ozon Express (4,33)
-
«Перекресток Впрок» / «СберМаркет» (оба 4,22)
-
«Перекресток – Доставка» / METRO (оба 4,15)
-
«Яндекс.Еда» (4,07)
Исследование проведено в соответствии с методикой испытаний, базирующейся на предварительном национальном стандарте на сравнительные испытания мобильных приложений ПНСТ 277-2018.
