Успешность SMS-активаций оптом нельзя оценивать одной долей, пока не определено, что считается успехом. Выданный номер ещё не означает полученное сообщение, а полученное сообщение не гарантирует завершение действия в стороннем приложении. Разделение этапов позволяет понять, где именно теряются время и деньги.
Начните с воронки, а не с рейтинга
Для каждого направления учитывайте запросы покупки, фактические выдачи, полученные SMS и конечные результаты вашей задачи. У каждого перехода будет свой знаменатель. Доля выданных номеров считается от запросов покупки, а доля доставленных сообщений — от выданных номеров, для которых корректно начато ожидание. Смешение знаменателей делает сравнение бессмысленным.
Незавершённые заказы не следует немедленно относить к неудачным. Выберите момент, когда группа достаточно завершена для анализа, и отдельно покажите оставшиеся открытые операции. Иначе более медленное направление будет выглядеть хуже только потому, что его сообщения ещё ожидаются.
Сравнивайте одинаковые условия
Страна, сервис, тариф и период наблюдения должны быть одинаковыми либо явно разделёнными в отчёте. Нельзя сравнивать один тариф утром с другим вечером и без оговорок приписывать разницу их качеству. Наличие и поведение внешних сервисов могут меняться. При небольшом количестве операций один результат заметно изменяет процент.
Не объявляйте победителя после единственного удачного номера. Заранее задайте достаточный для вашей задачи объём наблюдения и правила остановки. Универсального размера выборки нет: он зависит от допустимого риска и величины ожидаемой разницы. Вместо красивого округлённого процента показывайте также абсолютные значения, например число выдач и число завершённых проверок.
Добавьте время и стоимость
Два предложения с близкой доставкой могут сильно отличаться по скорости и расходам. Сохраняйте время от покупки до выдачи и отдельно от начала ожидания до сообщения. Одна общая длительность не покажет, задерживается ли покупка или сам код. Для цены учитывайте только подтверждённые денежные операции и выделяйте спорные суммы.
- Показывайте количество операций рядом с каждым процентом.
- Разделяйте отсутствие наличия и отсутствие SMS после выдачи.
- Не смешивайте возвраты на проверке с уже зачисленными.
- Сравнивайте стоимость результата вместе со временем ожидания.
Не приписывайте внешние ограничения тарифу
Регистрацию может остановить правило целевого приложения, которое не связано с доставкой SMS. Например, документация Telegram об ошибках отдельно описывает ограничения частоты действий. Такие события следует учитывать своей категорией, а не автоматически записывать в «плохие номера».
Для разбора спорной серии полезна небольшая обезличенная выборка: идентификатор заказа, направление, время и код ошибки. Она позволяет проверить гипотезу. Полный архив кодов авторизации или API-ключи для такой проверки не нужны. Не публикуйте чужие номера и переписку в открытом рейтинге.
Когда менять рабочий вариант
Решение о смене принимайте по заранее выбранным критериям: расходы, доставка, задержка и доля неразобранных операций. Меняйте один существенный параметр за раз и сохраняйте дату изменения в своём журнале. Это поможет отличить реальный эффект от случайного колебания.
Текущие условия опта можно уточнить в боте SMS HUB, а конкретные расхождения — в поддержке. На сайте рабочие покупки ещё не подключены. Предложенная методика — способ анализа ваших данных, а не опубликованный рейтинг или обещание определённого процента доставки.