• 最近访问:
发表于 2024-12-30 22:08:17 东方财富Android版 发布于 广东
第二个寒武纪将出现…
第二个寒武纪将出现…
发表于 2024-12-30 21:28:41 发布于 广东

$云天励飞-U(SH688343)$  

国产边缘AI芯片架构如何创新?云天励飞“算力积木”

作为AI芯片领域代表企业,云天励飞受邀出席“AI芯片与高性能计算应用论坛”,分享国产边缘AI芯片架构创新思路。

云天励飞副总裁、芯片产品线总经理李爱军在演讲中说道,过去一年半,大模型经历了从语言到多模态的转变,并且正快速向物理世界演进;大模型落地应用也从云端逐渐走向边缘端,而大模型在边缘端的应用给AI芯片带来了全新的挑战。

边缘端场景具有“多且碎”的特点,不同场景应用对算力、内存、带宽的要求也不尽相同。如何通过更灵活的芯片架构设计,尽可能让AI芯片满足不同场景的需求,是业界共同思考的问题。

在此背景下,云天励飞提出了“算力积木”AI芯片架构,让芯片能够像搭积木一样灵活组建、灵活扩展。

以云天励飞基于“算力积木”打造的国内首颗国产工艺边缘AI芯片DeepEdge10系列为例,DeepEdge10系列芯片基于一个标准化的大模型计算单元打造,可实现1.8B大模型的实时高效推理。

通过D2D Chiplet技术、C2C Mesh技术和C2C Mes Torus技术,云天励飞将标准计算单元像搭积木一样,封装成不同算力的芯片,覆盖8T-256T算力应用,可实现7B、14B、130B等不同参数量大模型在边缘端的高效推理。

目前,DeepEdge10系列芯片可支持包括Transformer模型、BEV模型、CV大模型、LLM大模型等各类不同架构的主流模型,并在机器人、边缘网关、服务器等领域实现商业化应用。

图片

随着大模型进一步深入行业和场景,市场对边缘AI芯片的需求将越来越大,而目前全球边缘AI芯片市场仍处于萌芽阶段。未来云天励飞将坚持走自主研发路线,通过架构创新,在国产工艺上实现芯片性能的突破,为行业带来更好用、更高性价比的国产AI芯片产品。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
郑重声明:用户在社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-34289898 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:021-54509966/952500