分享好友 最新资讯首页 最新资讯分类 切换频道
把大模型揣进自己的小口袋,上海交大团队发布全球首个端侧原生稀疏大模型
2025-08-24 10:51

图片

如果拥有一个能揣进裤子口袋的大模型,它能随时连接你的手机、汽车、电脑、眼镜,不用联网保护隐私,还能随时随地用聪明大脑辅助工作、娱乐等各种需求,你会心动吗?

7月26日,在徐汇西岸,上海交通大学携手徐汇区人民政府举办的2025世界人工智能大会分论坛“AI 未来发展论坛:超级智能,无界共创”主题论坛上,上海交通大学发布了多项AI重大科研成果,其中“全球首个端侧原生稀疏大模型”吸引了与会者的好奇。

目前智能终端厂商提供的端侧大模型服务集中于小规模量化模型,模型效能相比于云端大规模未压缩模型大幅下降。上海交大计算机学院特聘教授糜泽羽介绍,这款端侧大模型面向端侧设备的异构算力、异构内存、功耗等约束进行原生设计,“一步到位”训练出与端侧硬件“精巧匹配”的百亿大模型,并与终端智能操作系统在推理部署时进行协同设计,能够解决模型智能水平衰减问题,为端侧设备提供接近云侧大语言模型智能水平的流畅大语言模型服务。

糜泽羽从口袋中拿出手机大小的初代产品,这只能够“握在手中”的硬件智力水平指标已领先国际同等规模开源大模型,并且在百元级国产端侧芯片上流畅运行(>10 Tokens/s)。

据悉,端侧原生大模型可在AI PC、AI手机、智能座舱、AI眼镜等新型智能终端中广泛应用,无需联网即可体验接近云端智能水平的大模型智能服务,有效解决数据隐私焦虑、云上调用成本高、时延不稳定等问题。“这个产品将面向所有人。我们希望它能够在保护数据隐私的同时,提供千人千面的个性化智能服务,提升生活品质。同时,能显著降低云服务成本,并引爆智能终端市场、催生新应用新业态。”糜泽羽说。

会上同时发布的还有科学基座大模型Innovator与科研智能体 SciMaster、DeepRare:推理型罕见病智能体诊断系统、MemOS全球首个大模型记忆操作系统,以及Data-centric AI 基础设施,这些成果集中展示了上海交大在AI底层技术突破方面的进展,以及AI在终端、医疗等领域大规模应用、赋能行业的巨大潜力,在彰显高校科研实力的同时,为相关产业提供了可复制、可推广的技术方案。论坛上还展示了由上海交大和中国福利会联合成立的上海市青少年AI学院的学生作品,富有想象力的AI创作与原型展现了科技传承的生机与活力。

最新文章
世界杯八强诞生 摩洛哥成最大黑马
“我去过摩洛哥,那里的足球很纯粹。”,某位解说员当年的这一经典解说一语成谶。“纯粹”的摩洛哥用他们纯粹的足球挺进了8强!
三友知策 | 浅析特定关系人抢注情形之“特定关系”的判定以及在商标案件中的适用
前  言在市场经济高速发展的当今社会,商标作为企业重要的无形资产,其保护受到了企业的高度重视。在实践中,特定关系人恶意抢
“教”无涯 “研”不尽 | 九一小学南中环校区组织数学教研活动
10月24日,太原市小店区九一小学南中环校区数学组的教研活动在如火如荼地进行中。此次活动特邀太原市教科研中心王国萍老师莅临指
株洲男子因外国学历认证之事数次状告教育部败诉
红网株洲分站3月30日讯(分站记者 龙琦)由于自己的外国学位证书不予认证,家住湖南省株洲市荷塘区红旗村的刘远东一纸诉状,将中
“好品山东”装上“智慧脑”产业树起风向标
2020年,枣庄市5G石榴大数据分析平台落户中国石榴种质资源圃。作为枣庄最具特色、最有影响力的农业产业品牌,“峄城石榴”将数字
逼近9.4万美元,谁在左右比特币价格?
在美国股票和美元持续波动之下,更多投资者转而投向黄金与比特币文|成孟琦编辑|杨秀红4月22日,避险情绪消退下,传统避险资产
@全网最有情怀的微电影爱好者,美丽湘村邀你来记录
(来源/红网作者/汪衡)带着一份情怀我们走近一片田野用诗意的语言温暖的镜头记录着这里所发生的一切以光影为媒赋予乡村“诗和远方
两种方式投注福彩快乐8游戏,中奖获赠票
  辞旧迎新,广州福彩为您送上新年第一份好运!为真情回馈广大购彩者对中国福利彩票的支持,广州市福利彩票发行中心自2024年12
26000点了,A股缺什么?
9月10日,教师节,祝天下老师们节日快乐。首先关注大盘指数,上证指数如今在3920点压力线下横盘整理,逡巡不进,但金钱永不眠,
新学期,新气象:晋源区第八实验小学再启新征程
2月17日, 晋源区第八实验小学全体领导干部、教师齐聚校园,开启新学期的工作。及早谋划抓开局,提前部署求实效。晋源区第八实验
推荐文章