2026年更新
遮盖失败的两种方式
法律团队面临两种失败模式，均会产生真实的法律责任。
遮盖不足会暴露必须保密的特权数据或个人信息——当事方披露了本有权利、往往也有义务保护的材料。
过度遮盖则隐藏了对方律师有权查阅的事实。法院将此视为妨碍司法行为，属于可受制裁的证据开示违规。
重视召回率而非精确率的AI工具在设计上会导致第二个问题：将文件80%的内容涂黑的AI引擎确实不会遗漏任何内容，但结果毫无用处，还可能引发法院制裁。
两种失败模式的终点相同：法官、解释和费用。
Schnitzer Steel案（2024年）
Athletics Investment Group诉Schnitzer Steel（2024年）展示了法院如何处理不当文件扣押。
一方提交了带有大量标记的文件，对方律师提出异议。法院审查材料后认定标记超出了法律允许的范围。
结果：依据联邦民事诉讼规则第37条实施制裁。提交方为存在缺陷的程序付出了代价。
此类制裁并不新鲜，法院多年来一直在使用。这个案件的突出之处在于时机：AI辅助审查已在诉讼中普及，案件提出了一个关键问题：法律团队在将AI工具投入生产使用前是否检验过其精确率？
22.7%的精确率问题
Presidio是由微软开发的开源PII检测引擎，在文件审查工具中被广泛使用。在法庭文件和合同上的测试显示其精确率为22.7%。
精确率衡量阳性标记正确的频率。在22.7%的精确率下，每100个标记中约77个是误报——这些内容按任何适用标准都不敏感。
对于电子证据开示，计算是直接的：以该精确率处理的10,000份文件会有数千个无依据的标记。提交方面临与Schnitzer Steel被告相同的风险：被质疑的提交物、法院审查和可能的制裁。
精确率优先的审查
法院在审查争议标记时提出一个狭义问题：每处标记是否有特权、保密规则或法院命令支持？法院不会问提交方的工具是否尽可能多地标记内容。
没有适当依据的标记就是证据开示违规，无论是人工还是AI作出的都一样。
对于律师来说，这意味着AI审查工具需要以精确率——真正享有特权的标记比例——而非仅以召回率来衡量。一个在22.7%精确率下达到90%召回率的工具捕获了更多敏感内容，但也为77.3%的误报创造了审查负担。当这种审查没有发生时，广泛的过度扣押随之而来。
Schnitzer Steel案之后，每一处提交中的标记都是向法院发出的声明：这一内容是合法扣押的。该声明必须经得起审查。
请参阅AI精确率在法律文件审查中的指南和律师-委托人特权与AI了解更多背景。