Csuite.so最近做了一个很有意思的测试:用三个开源AI翻译模型翻译一句法律德语,结果翻车了。测试用的英文原句是法律文书中的常见表述:“this note is sent without prejudice, and nothing in it waives our rights under clause 14.”(本通知无损发出,不放弃第14条项下的任何权利)。这是一个法律术语,意思是发件人保留所有权利,信中任何内容都不能在日后被用来对抗发件人。
三个开源模型的翻译结果:Gemma 4 31B翻译成“ohne Präjudiz”,德国律师能理解但完整表述更常见;Qwen3.8 27B翻译成“ohne Anerkennung einer Rechtspflicht”,这是标准法律公式,基本正确;Mistral Small 3.2 24B翻译成“ohne Vorbehalt”,意思是“无保留”,和原文意思完全相反!三个模型通过OpenRouter API调用,temperature设为0,固定种子,三次调用总共花费0.0003美元,翻译速度都是两秒左右。文章回顾了2017年堪萨斯州的一个真实案例:州警用Google Translate问司机“Can I search your car?”,翻译成西班牙语后变成“Can I find the car?”,司机同意了,但联邦法官最终排除了搜索结果。这个案例完美说明了机器翻译的问题:输出又快又免费又流利,但在最关键的地方错了。作者的建议是:让AI写草稿,但在习语、语气、法律精度和小语种训练数据这些地方花人工时间。现在最好的机器翻译在普通文本上已经能和专业译者并肩,但在法律、医疗等高风险场景,人工审核仍然不可替代。