AI现在能读合同，还能预测会引发纠纷的歧义

我们的最新研究：为了通过AI帮助我们更好地治理，朝着政治超级智能方向起步建设，我们开发了一款AI，它可以阅读合同，并预测会引发纠纷的歧义内容。

我们在10000份Kalshi和Polymarket解析规则上测试了它，效果相当不错！只需要读取解析规则，我们的工具就能评估哪些预测市场合同更有可能引发解析纠纷，效果远好于随机猜测。

大部分治理工作本质就是写出好规则。但写出好规则很难。几个世纪以来，我们一直依赖人类专家，尽可能写出能预先考虑到所有混淆、歧义和漏洞的规则。

我们不可避免地会犯错——从我今天文章里探讨的著名合同法案例“两艘同名Peerless号船”，到不清晰的内容审核政策、模糊的立法，再到最近美伊停火协议措辞引发的风波，这一直是个长期存在的挑战。

AI能帮我们把这件事做得更好吗？在Free Systems，我们愿景的重要一部分就是探索AI如何改进治理方式，所以我们迫切想要对此进行测试。

我们收集了10000份预测市场合同样本，包含它们公开的解析规则，以及哪些合同最终产生了纠纷的相关信息。

之后我们和合作伙伴Claude一起开发了一份合同清晰度10分评分标准，覆盖的要素包括核心问题定义是否清晰、主体是否可识别、时间窗口是否明确规定等等。

我们让一个大语言模型评分器将这套标准应用到合同上，然后构建了一个简单的机器学习模型，用10维度标准得分来预测后续是否会产生纠纷。

得到的评分能让我们给预测市场合同提供总体评级，反映出它们的撰写清晰度，以及未来陷入纠纷的可能性。我们评为“CCC”级的合同，陷入纠纷的概率是我们评为“A”级合同的3.4倍。

这项工作还有很多要做——我们需要确认我们的预测在真正的样本外测试中依然成立：也就是我们现在给合同打分，观察它们未来是否真的产生纠纷，这是我们下一步的工作。此外我们还需要把这个方法扩展到预测市场合同之外的场景。

但我们对这个方向感到非常兴奋。这类工具能帮助我们在歧义演变成纠纷之前就识别出它们，让我们写出更好的规则，改进治理，最终实现政治超级智能。

我们的报告里有更多信息，在这里：

与@elliotjpaschal 合作完成