Автор: Венкат Рамакришнан (Venkat Ramakrishnan)
Оригинал статьи
Перевод: Ольга Алифанова

Тестирование персональных предложений критически важно для приложений, применяющих ИИ и предлагающих такую возможность. Эти предложения важны как для Apple Intelligence в iPhone 16.0, так и для других областей, так как применяются для:

• Предложения часто используемых приложений
• Уведомлений на основании времени, локации или деятельности
• Рекомендаций при поиске (приложений и виджетов)
• Интеллектуального ввода текста.

Я разрабатывал детальную тест-стратегию для некоторых подобных задач и выяснил, что кейсов тут очень много – иногда непомерно много. Но, как пытливый тестировщик, я считаю, что очень важно покрыть максимально возможное количество сценариев, тем самым улучшая качество приложения.

Предложение недавно использованных приложений

Приложение может определить недавно использованные приложения множеством способов. Очень важно отслеживать контекст, ключевые слова и изображения, которые искали в течение определенного периода времени.

Самая полезная опция – это выводить недавно использовавшиеся приложения в начале списка. Тут надо учитывать две вещи – как давно приложение использовалось, и как часто им пользуются. Если есть возможность тонко настроить приложения в начале списка, то начинать тестирование нужно именно с этого.

Затем в зависимости от выбранной опции надо проверить, выдаются ли недавно используемые приложения, методично и тщательно проверив разные комбинации, включая:

• Отображение всех используемых приложений
• Исчезновение приложения из списка, если оно использовалось, но было удалено
• Отсутствие неиспользуемых приложений в списке
• Количество приложений, выведенных в списке, и его правильность в различных ситуациях.

Предложение часто используемых приложений

В этом случае важен такой параметр, как количество использований приложения, и, соответственно, приложения, у которых этот параметр максимален, должны выводиться в начале списка – а дальше по нисходящей в зависимости от количества запусков. Надо проверить, меняет ли приложение свой порядок в списке в зависимости от времени использования. Количество выводимых приложений должно зависеть от частоты применения, а неиспользуемые приложения должны отсутствовать.

Контекстные предложения

Если приложение отслеживает контекст (время, локацию, вводимый текст), оно может потенциально предлагать приложения, не попадающие в категорию «недавно» или «часто» используемых! Надо проверить, как эта фича работает в данной конкретной реализации, и разобраться, как это лучше тестировать. Рекомендую пройтись по детальной документации работы для этой фичи.

И, наконец…

Я всегда рад разработать тест-стратегию и сценарии для приложений на основе ИИ и GenAI. В будущем я напишу про уведомления, рекомендации поиска и интеллектуальный ввод.

Обсудить в форуме