关闭广告

苏州大学突破:8B模型实现长文理解媲美GPT-4o

科技行者3409人阅读


当我们阅读一本厚厚的小说时,大脑会自动筛选重要情节,忽略无关细节。然而,人工智能在处理长文本时却常常"迷失在细节中",就像一个初读者被海量信息淹没,难以抓住关键要点。现在,苏州大学的研究团队找到了解决这个问题的巧妙方法,他们提出的"语境降噪训练"技术,让AI模型学会了像经验丰富的读者一样,在冗长文本中精准定位关键信息。

这项由苏州大学唐泽成、季百倍、李俊涛等研究人员主导的突破性研究,于2025年1月发表在机器学习顶级预印本平台arXiv上(论文编号:arXiv:2510.05862v1)。令人振奋的是,通过他们的训练方法,一个仅有80亿参数的开源模型在处理长文本任务时,竟然达到了与GPT-4o相当的表现水平。这就好比一个刚入学的学生,通过特殊的学习方法,在阅读理解能力上追平了博士生。

长文本处理一直是AI领域的"老大难"问题。传统的语言模型在面对超长文档时,往往会被无关信息干扰,就像在嘈杂的派对上试图听清某个特定的对话一样困难。研究团队发现,这些模型虽然能"看到"整篇文档,却无法有效区分哪些内容真正重要,哪些只是"噪音"。

为了解决这个问题,研究人员开发了一种名为"语

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

谁懂啊!小个子冬日穿搭靠这几招,视觉立刻拔高10cm

黎贝卡的异想世界 浏览 2788

定位中型轿车 比亚迪海豹07 EV官图发布

车质网 浏览 1909

X把伊朗国旗改成狮子太阳旗 哈梅内伊把"国旗"删了

澎湃新闻 浏览 13208

省委书记暗访次日 市委书记赴现场办公要求加快整改

新京报政事儿 浏览 7152

中国游客到迪拜参加婚礼被困:目睹导弹从上空飞过

极目新闻 浏览 1920

中国拿出比稀土更致命的王牌美国"破防" 万斯:要冷静

时时有聊 浏览 7706

捷途梁海明:“四个坚持”破局 用户共创+战略深化启新程

网易汽车 浏览 3048

痛惜!资深音乐人突发意外去世,很多人听过他的歌...

可乐谈情感 浏览 3447

贷款炒金的"黄金赌徒"后悔了:有人3天亏掉2个月工资

第一财经资讯 浏览 8856

英特尔怒涨逾12%!标普500、纳指再创新高,油价回落

第一财经资讯 浏览 263

郭磊:三季度经济数据——哪些线索需要关注

首席经济学家论坛 浏览 3677

网友广州偶遇汪小菲带娃逛动物园

萧鑟科普解说 浏览 2411

荷甲副班长阿尔梅罗大力神8-2横扫兹沃勒,霍恩坎普帽子戏法

懂球帝 浏览 3423

高端汽车市场创2亿营收,「悉智科技」拓疆AIDC蓝海 |36氪首发

36氪 浏览 2972

“复古甜心”穿搭突然大火!春天穿时髦又减龄

LinkFashion 浏览 1856

看看这些穿搭就知道,秋季穿衣很简单,找对方法舒适又得体

静儿时尚达人 浏览 3428

深圳“果链女王”拟减持3600万股,公司市值超千亿,正冲刺A+H上市

红星资本局 浏览 2556

巴基斯坦和阿富汗同意继续停火 将于11月继续会谈

环球网资讯 浏览 3472

媒体:怒批欧洲软弱 结果特朗普自己成"吐槽大会"主角

新京报评论 浏览 19564

普通人衣服没必要买太多,准备好这些实用的单品,百搭又舒适

静儿时尚达人 浏览 3574

CBA历史第4+现役第1!吴前1276三分超张庆鹏 将追西热力江

醉卧浮生 浏览 2417
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1