跳转到内容

AFP 目前发布了一项研究,且尚无结果:评论转私信基准,其测量匹配率、送达率和首条私信时间的方法在任何数据存在之前就已写定。 本节今天没有任何地方出现已测量的数字。 当第一次运行完成时,其结果和原始数据集发布在产生它们的方法所在的同一页上。

研究它回答的问题状态
评论转私信基准方法论评论转私信自动化性能应如何测量?方法论已发布;数据收集未开始

五条规则适用于本节的每一页,不能满足它们的页面不作为研究发布。

  1. 数字之前先定义。 每个指标定义得足够精确,只阅读定义的陌生人会计算相同的事件。
  2. 流程完整发布——样本、持续时间、环境、什么保持固定什么没有——所以研究可以由不在 AFP 工作的人重新运行。
  3. 原始数据集已发布,以有文档的格式,在摘要旁边。没有数据集支撑的摘要是一个断言。
  4. 列出局限性。 任何会让读者打折结果的东西都说明在页面上,而不是留待发现。
  5. 每个数字都是测量的。 没有数字是估算的、凭直觉向上取整的,或从另一项研究搬来的,每个都注明日期并归属于产生它的运行。

一个背后没有方法的数字无法被检查,所以没有分量——而一个在数据到位后写的协议总是可以被塑造来美化结果。 先发布流程在任何人知道运行结果如何之前固定什么算作成功,并让读者不同意设计而不是与一个裸数字争论。

未完成研究的任何内容都不在此处隐藏。 上方的状态列确切说明每项已进展到什么程度,它只在一次运行完成时改变。

AFP 已经可以测量关于自身的什么

Section titled “AFP 已经可以测量关于自身的什么”

产品中的三个界面记录自动化做了什么,本节中的每个测量都由它们构建,而不是由读者看不到的检测构建。

界面它记录什么它适用于什么
活动执行记录历史每次运行走过图的路径、它停止的节点,以及记录在失败上的错误评论是否匹配,以及它走了哪个分支
活动 feedAFP 在已连接主页上处理的每条评论一行,结果记录在上面,以及三种失败类型的错误过滤器跨主页计算结果,以及找到 AFP 无法操作的评论
活动导出过滤后的 feed 作为 JSON 下载,文件名中带导出时间产品外分析,以及发布数据集

执行记录历史显示一个活动最近 20 次运行,且不自我刷新,这是任何读取它的研究中批大小的主实际约束。 测试和调试活动 介绍了如何阅读两种视图。

测试执行故意不是送达或时间的测量工具。 它们走与真实运行相同的图,但不调用 Facebook 或 Instagram,所以它们可以确认一条消息走哪个分支,但无法确认送达多快或私信是否到达。

  • 没有竞争对手性能数字。 AFP 没有测量任何竞争对手,对比页面 将每个竞争对手声明标记为未验证的公开材料,而不是伪装成数据。
  • 没有可送达性或触达声明。 Facebook 和 Instagram 在 AFP 交出消息后对它做什么,不在此处测量的任何内容之内。
  • 没有套餐配额数字。 配额是按套餐配置的,会变化;套餐和配额 解释存在哪些限制,而不固定会过时的数字。
  • 英文版本为权威来源。 方法和数据集仅有一个英文权威版本,翻译仅供参考。