后Transformer模型系统能够推动变革
创始人
2025-07-06 06:21:28
0

如果你能够获得传统大语言模型的输出效果,同时能耗却降低10到20倍,会怎么样?

如果你能够在手机上直接运行强大的大语言模型,又会怎么样?

事实证明,新的设计理念正在推动新一代AI平台的发展,这些平台将节约能源,释放各种全新和改进的功能,同时重要的是,还能提供边缘计算能力。

什么是边缘计算?

边缘计算是指数据处理和其他工作负载在接近数据源的地方进行,换句话说,就是在终端设备上进行,比如数据收集硬件或用户的个人设备。

另一种描述方式是,边缘计算开始让我们从云时代回归,在云时代,人们意识到可以集中存储数据。是的,你可以使用这些供应商服务,让客户端免于处理本地系统,但这会产生传输成本,而且通常控制力较弱。如果你能够在硬件设备上本地运行操作,这将创造各种效率,包括与能源消耗和应对气候变化相关的效率。

新兴的液体基础模型正在崛起,它们从传统的基于Transformer的大语言模型设计创新发展为其他形式。

2024年9月,Carl Franzen在VentureBeat上发表的一篇文章涵盖了一些相关设计。我需要声明:我被列为Liquid AI的顾问,我认识MIT CSAIL实验室的很多研究人员,这项工作正在那里进行。但不要只听我的话,看看Franzen怎么说。

"新的LFM模型在性能上已经超越了同等规模的其他基于Transformer的模型,如Meta的Llama 3.1-8B和微软的Phi-3.5 3.8B,"他写道。"这些模型不仅在原始性能基准测试上具有竞争力,在运营效率方面也表现出色,使它们适用于各种用例,从金融服务、生物技术和消费电子等领域的企业级应用,到边缘设备的部署。"

项目负责人的更多见解

今年4月,Will Knight和Liquid AI的Ramin Hasani在IIA进行了一次访谈。

Hasani谈到了Liquid AI团队如何利用线虫(具体来说是秀丽隐杆线虫)的大脑开发模型。

他谈到了这些后Transformer模型在设备、汽车、无人机和飞机上的应用,以及在预测金融和预测医疗方面的应用。

他说,LFM可以完成GPT的工作,在设备上本地运行。

"它们能够听,也能够说话,"他说。

更多新发展

Hasani表示,自最近项目启动以来,Liquid AI一直在与大公司进行商业讨论,探讨如何将这项技术很好地应用于企业。

"人们关心隐私,关心AI的安全应用,也关心AI的低延迟应用,"他说。"这三个方面是企业无法从其他类型的AI公司那里获得价值的地方。"

在谈到创新者应该"内心是科学家"时,Hasani回顾了离线运行大语言模型的一些基本价值主张。

看,无需基础设施

围绕LFM的这次特定对话中得出的一个主要观点是,如果它们在设备上离线运行,你就不需要连接系统的扩展基础设施。你不需要数据中心或云服务,或任何类似的东西。

本质上,这些系统可以实现低成本、高性能,这只是人们谈论将"摩尔定律"概念应用于AI的一个方面。这意味着系统正在快速变得更便宜、更多样化、更易于管理。

相关内容

热门资讯

新华全媒+|我国自主研制的60... 8月23日清晨,在南海飘着小雨的蓝色晨曦中,我国自主研制的6000米级深海无人遥控潜水器(ROV)“...
联想副总裁陈振宽:打造多元AI... 本报讯 (记者贾丽)8月23日,2025中国算力大会在山西大同举办。联想集团有限公司(以下简称“联想...
均普智能上半年盈利质量持续提升... 均普智能8月23日发布的2025年半年度报告显示,上半年,公司实现营业收入10.32亿元,同比减少7...
全球首例!深铁集团新技术为隧道... 【深圳商报讯】(首席记者 李秀瑜)一种名为“缪子”(μ子)的基本粒子虽看不见、摸不着,却能轻松穿透岩...
兰州打造“读者之城” 延伸阅读... 20日至24日,一场融合科技感与人文温度的文化盛宴在甘肃兰州开启。2025兰州书展携30万册图书、近...
“一句话就能让角色动起来”,这... 来源:市场资讯 (来源:上观新闻) 如今我们在刷短视频的时候,经常会看到文物活起来,照片动起来,甚...
海拔4000米高原上,深圳造机... 8月24日上午,海拔4000米的西藏那曲市比如县人民医院手术室内,一场牵动无数目光的手术正在紧张进行...
2025年广东省科普讲解大赛总... 8月22日,2025年广东省科普讲解大赛总决赛在广东科学中心举办。来自全省44支代表队的262名选手...
原创 为... 太阳是宇宙中一个至关重要的恒星,正如阳光普照大地,如果没有太阳,宇宙的温度将会骤降至零下,整个太阳系...
别急着写码:AI 协作超稳两步... 很多人第一次接触 Claude Code,都会忍不住直接甩一句「帮我写个代码」。结果往往不尽人意——...
全球首个机器人消费节总销售额突... 据北京亦庄官方微信公众号消息,近日,2025年“E-TOWN机器人消费节”于北京经济技术开发区(北京...
达迩科技等取得新型轨道盖板及编... 金融界2025年8月23日消息,国家知识产权局信息显示,达迩科技(成都)有限公司、上海凯虹科技电子有...
原创 研... 该研究团队从生物学中获得灵感,研制出一款名为Rhagobot的昆虫大小的机器人。 研究人员发现了水...
美的取得电控盒和空调器专利,利... 金融界2025年8月23日消息,国家知识产权局信息显示,广东美的制冷设备有限公司取得一项名为“电控盒...
对标高端市场?传音5.95毫米... 【CNMO科技新闻】根据最新报道,曾在今年2月MWC(世界移动通信大会)上亮相的传音Tecno超薄概...
山寨 iPhone 17 Pr... 讲个道理,当我看到这则消息的时候,内心确实怀着非常吃惊的想法,要问这则消息是什么“毫无疑问就是iPh...
被戏称“半价理想”的零跑,怎么... 知道零跑卖得好,但不知道它卖得有这么好。 前些天,零跑公布了上半年的财报,上半年净利润0.3亿元,首...
HBM驱动键合革命:AI算力时... 生成式AI的快速发展推动了对高性能AI芯片的需求,进而带动了相关半导体制造设备需求增长。HBM凭借高...
原创 原... 2023年,俄罗斯“月球-25”号成功发射, 以为可以创造近半个世纪以来首次登月,结果呢?印度月船三...
晶科能源等公布“一种光伏组件”... 天眼查APP显示,近日,晶科能源股份有限公司,浙江晶科能源有限公司申请的“一种光伏组件”专利公布。 ...