北二外发布大语言模型翻译质量评测报告

11

北京6月23日电(记者 李京泽)6月23日,北京第二外国语学院发布《大语言模型翻译质量评测报告 BISU-AiTQA(v1.0)》。

据悉,该评测突破国际现有评测以英语为核心的现状,构建了以汉语为核心,覆盖多语种、多领域的大语言模型翻译质量评测体系,具有开创性意义,是促进中外人文交流,提升汉语全球表达力的积极探索。

基于多年的外语学科与教学积淀、结合前期翻译评测研究成果,北二外集中英语、日语、俄语、法语、阿拉伯语五个语种师生力量,面向ChatGPT、Claude、Gemini、Grok、DeepSeek和通义千问六个国内外语言大模型,从当代文学、党政文献和外事新闻三个领域开展翻译质量测评研究。

据了解,BISU-AiTQA(v1.0)以汉语为核心、以中国特色文本为基础,从语言特征维度、神经网络维度构建了包括词汇多样性、句法复杂度、篇章衔接度、语言可接受度等在内的六项指标体系,着重关注译文的语言使用特性,可有效识别模型在词法、句法和篇章衔接方面的能力,同时考察模型对语义的理解与语言表达能力。

这不仅实现了对大语言模型译文的多维分析,更以实证方式检验了模型对中国话语、文化意涵与政策表述的处理能力,填补了“以汉语为核心”的多语种评测空白。

从评测结果来看,生成式人工智能目前不完全具备处理复杂语言的能力,在借助人工智能技术时,使用者必须具有判断力,而培养这种判断力正是外语教育重要的育人功能之一。

人工智能时代的外语学习,必要且必须。基于这样的逻辑,BISU-AiTQA(v1.0)脱胎于文工交叉学科,又反哺语言教学,项目中的多语种多领域语料及翻译评测指标可广泛应用于翻译课程、语言测试、语言分析等教学场景,为推动翻译教育与语言研究的数字化转型提供重要的实践平台。(完) 【编辑:张令旗】

官司缠身的特朗普呼吁罢免所有调查他的高级官员

北京生活必需品货源充足供应稳定

19名康复医务人员捐献血浆

美国或迎来“最贵感恩节”:面粉涨价超20% 禽流感抬升火鸡价格

国台办:日本在台湾问题上对中国人民负有历史罪责

福建武夷山至香港航线复航

美妄以“台湾”取代“中华台北” 国台办:“以台制华”图谋必将失败

澳门地区中国和平统一促进会纪念《反分裂国家法》实施15周年

深入理解伟大建党精神是党的“精神之源”

美德发表联合声明 美国2026年起将在德国部署远程武器

武汉“十一”期间酒店预订量涨4.8倍 当选“90后最爱去的城市”

台风“尼格”逐渐靠近华南沿海 2日起弱冷空气将影响中东部地区

去年我国实施消费品召回690次涉及产品996.6万件

东西问|陈东:舞剧《朱鹮》这样见证中日“朱鹮缘”

中青网评:让电子烟告别野蛮生长

文章版权声明:除非注明,否则均为康到官网原创文章,转载或复制请以超链接形式并注明出处。