arXiv AI· Xin Liu, Xu Han, Yuxin Wang, Haoran Song, Mingjian Zhao, Lei Wang·· 2 天前评分44
Testing Conversation Preservation Across LLM APIs: A Rule-Based Oracle for Detecting Silent Information Loss
摘要
我们引入isloss，一种确定性的测试工具，用于验证LLM API翻译过程中对话信息的保真度。它将源请求和翻译后的响应映射到共享的中间表示ConvIR，并通过显式规则区分合法的表示变化与信息丢失。与schema验证或基于参考的差分测试不同，isloss无需参考翻译或额外模型调用。
推荐理由
请对照arXiv AI原文，核对完整说明及适用条件。
本站只提供摘要与原文入口。完整内容请阅读原文。
来源：arXiv AI · arxiv.org