这四周做什么，不做什么

一个问题，一项改动，一份报告

我们先约定一个购买问题：消费者在你和另一个选择之间做决定之前，确实可能会问出来的那一句。这个窗口里的一切都挂在这个问题上。

由它得出一个诊断、一项待改动的内容、你的决定，以及——如果你批准了——一次核验和一份报告。

我们会看什么

公开信息，以及你就这些信息告诉我们的事。输入面就这些。

• 你就这件商品公开发布的那些页面。
• AI 遇到约定的那个问题时答了什么，以及它给出的理由。
• 这条理由依据了哪些来源，你的和别人的。
• 你告诉我们的、你自己材料里已经过期、不完整或者写错的地方。

我们不碰什么

这个清单很短，而且窗口进行中不会重新商量。如果一个诊断指向了清单上的东西，诊断就在那里停下并说明。

• 你的系统。我们从不会被加成任何地方的管理员，也不会提这种要求。
• 你的客户。名单、导出、联系方式，以及任何关于买你东西的那些人的信息，我们都不要。
• 你的定价和商务条款。
• 约定问题时你说过不在讨论范围内的任何东西。

一次 Pilot 能测量什么

两件事，都是关于这项改动本身的，也都会直说。

被批准的动作是不是真的完整地做到了它指名的那个素材上；以及之后，我们关心的那个环境有没有一次可观察到的机会看到它。

一次 Pilot 测量不了什么

消费者是不是因为这项改动才选了你。某个 AI 系统现在是不是换了一种方式看待你的材料。你的营收有没有因此动过。

这些不会因为把 Pilot 拖长，或者把同一批证据读得宽松一点，就变得可知。它们在这套方法能确立的范围之外；一份暗示自己知道的报告，正是这一页要排除掉的东西。

开始之前你需要具备什么

东西不多，但一样都不能少。缺任何一项，Pilot 得到的结果都读不出意义。

• 一个关于这件商品的公开页面，由你掌控，并且可以修改。
• 一个你确实在意其答案的购买问题。
• 一份你愿意改、也改得回来的素材。
• 一位能拍板批准改动、不必再走一圈会签的具体的人。
• 一段时间窗口，期间同一批页面上没有别的大改动在进行。

它如何收尾

以一份写明等级的书面报告收尾，并给出是否值得再走一轮的建议。

很多时候，如实的报告是：改动上线了，没有观察到后续变化，原因不确定。这也是一个真实的结果，我们就用这样的措辞说出来。一次只可能有好结局的 Pilot，不叫 Pilot。