摘要

本文探讨了律师对由大型语言模型（LLM）生成的法律文件与人类撰写的法律文件的感知差异。研究旨在应对LLM技术进步带来的法律文件自动化生成趋势，并提供关键见解，以促进负责任的设计、开发和采用。通过让75名律师评估标记为AI生成或人类撰写的文件的正确性和语言质量，研究发现律师普遍偏好人类撰写的文件。尽管如此，大多数参与者预期未来法律文件将实现自动化生成。这些发现对法律实践者、政策制定者和立法者具有重要意义，有助于推动关于如何更新法律流程以反映最新技术发展的必要讨论。

原理

研究通过两个主要步骤进行：首先，准备两份内容和质量相当的法律文件，一份标记为AI生成，另一份标记为人类撰写；其次，邀请律师参与者评估这些文件的正确性和语言质量。通过这种方式，研究揭示了律师对AI生成文件的偏见，即使这些文件在内容和质量上与人类撰写的文件相当。这种偏见可能源于对AI生成内容的普遍不信任，以及对法律文件专业性和准确性的高要求。

流程

1. 准备两份法律文件，确保它们在内容和质量上相当。
2. 将一份文件标记为AI生成，另一份标记为人类撰写。
3. 邀请75名律师参与者参与评估，要求他们根据正确性和语言质量对文件进行评分。
4. 收集并分析参与者的评分和反馈，以确定他们对AI生成文件和人类撰写文件的偏好。
5. 通过定量和定性分析，揭示律师对AI生成文件的偏见及其背后的原因。

应用

研究结果表明，尽管存在对AI生成法律文件的偏见，但律师普遍认为未来法律文件的自动化生成是可能的。这为法律服务行业提供了新的发展方向，特别是在降低成本、提高效率和扩大司法访问方面。未来，随着技术的进步和公众认知的改变，AI生成的法律文件可能会被更广泛地接受和应用。