Исследования

AFP публикует одно исследование на данный момент, и у него ещё нет результатов: бенчмарк из комментария в ЛС, метод измерения доли совпадений, доли доставки и времени до первого ЛС которого записан до появления любых данных. Ни одной измеренной цифры нет нигде в этом разделе сегодня. Когда первый запуск завершится, его результаты и сырой набор данных публикуются на той же странице, что и метод, который их произвёл.

Что здесь публикуется

Исследование	Вопрос, на который отвечает	Статус
Методология бенчмарка из комментария в ЛС	Как следует измерять эффективность автоматизации из комментария в ЛС?	Методология опубликована; сбор данных не начат

Что должно делать каждое исследование здесь

Пять правил применяются к каждой странице в этом разделе, и страница, которая не может их выполнить, не публикуется как исследование.

Сначала определения, потом цифры. Каждая метрика определена достаточно точно, чтобы незнакомец, читающий только определение, насчитал те же события.
Процедура публикуется полностью — выборка, длительность, окружение, что зафиксировано, а что нет — поэтому исследование может быть повторно проведено тем, кто не работает над AFP.
Сырой набор данных публикуется, в документированном формате, рядом со сводкой. Сводка без набора данных за ней — это утверждение.
Ограничения перечислены. Всё, что заставило бы читателя усомниться в результате, указано на странице, а не оставлено на обнаружение.
Каждая цифра измерена. Ни одна цифра не оценена, не округлена от догадки и не перенесена из другого исследования, и каждая датирована и отнесена к запуску, который её произвёл.

Почему методология публикуется раньше цифр

Цифра без метода за ней не может быть проверена, поэтому она не имеет веса — а протокол, написанный после появления данных, всегда можно подогнать, чтобы польстить результату. Публикация процедуры первой фиксирует, что считается успехом, до того, как кто-либо узнает, как прошёл запуск, и позволяет читателю не согласиться с дизайном, а не спорить с голой цифрой.

Ничто о незавершённом исследовании здесь не скрыто. Колонка статуса выше говорит точно, как далеко зашло каждое, и меняется только тогда, когда запуск завершается.

Что AFP уже может измерить о себе

Три источника в продукте записывают, что сделала автоматизация, и каждое измерение в этом разделе построено из них, а не из инструментария, который читатель не может увидеть.

Источник	Что записывает	Для чего полезен
История выполнений кампании	Путь, который каждый запуск прошёл по графу, узел, на котором он остановился, и ошибка, записанная при сбое	Совпал ли комментарий и какую ветку он принял
Лента активности	Одна строка на каждый комментарий, который AFP обработал на подключённой странице, с записанным результатом и фильтром ошибок по трём типам сбоев	Подсчёт результатов по страницам и поиск комментариев, с которыми AFP не смог действовать
Экспорт активности	Отфильтрованная лента как JSON-загрузка с временем экспорта в имени файла	Анализ вне продукта и публикация набора данных

История выполнений показывает 20 самых свежих запусков кампании и не обновляется сама, что является главным практическим ограничением на размер пакета в любом исследовании, которое её читает. Протестировать и отладить кампанию описывает, как читать оба представления.

Тестовые выполнения намеренно не являются измерительным инструментом для доставки или тайминга. Они проходят тот же граф, что и реальный запуск, но не делают вызовов к Facebook или Instagram, поэтому могут подтвердить, какую ветку принимает сообщение, и ничего о том, как быстро или приходит ли ЛС.

Чего здесь нет

Нет показателей производительности конкурентов. AFP не измерял ни одного, а страницы сравнения отмечают каждое утверждение о конкуренте как непроверенный открытый материал, а не выдают его за данные.
Нет заявлений о доставляемости или охвате. То, что Facebook и Instagram делают с сообщением, после того как AFP его передаёт, выходит за рамки всего измеренного здесь.
Нет цифр по лимитам тарифа. Лимиты — конфигурация тарифа, которая меняется; Лимиты тарифа объясняет, какие лимиты существуют, не закрепляя цифры, которые устареют.
Английская версия — эталон. Методология и набор данных имеют одну авторитетную версию на английском языке, переводы носят информационный характер.

Связанное

Методология бенчмарка из комментария в ЛС — определения метрик, процедуру и формат сырых данных.
Маршрутизируйте комментарии в ЛС — форма кампании, против которой берётся каждое измерение здесь.
Состояния выполнения — что значит записанное состояние запуска при чтении.
Модерировать комментарии — лента активности и её экспорт со стороны оператора.