Mango-SubBench

影视字幕翻译评测更看重长视频出海落地的实际交付标准，而非仅衡量译文与人工参考译文的相似度。合格字幕需同时满足语义准确、表达自然、断句规范、时间轴有效、质量可追溯多项要求，单一自动化指标无法完整覆盖全部评测维度。为解决该局限，我们联合北京第二外国语学院构建了专用视听翻译评测基准，配套高质量语料集与以自动化评测为核心的评估框架。该基准可实现可扩展、可复现的模型综合评测，并辅以人工随机抽样，对人物语气、文化适配度、观众观看体验等字幕细节特征开展人工校验。此外，一套面向视听翻译的专业级语料与评测基准将于近期开源。