芯原股份(芯原,股票代码:688521.SH)今日宣布其超低能耗且高性能的神经网络处理器(NPU)IP现已支持在移动端进行大语言模型(LLM)推理,AI算力可扩展至40 TOPS以上。该高能效NPU架构专为满足移动平台日益增长的生成式AI需求而设计,不仅能够为AI PC等终端设备提供强劲算力支持,而且能够应对智慧手机等移动终端对低能耗更为严苛的挑战。
芯原的超低能耗NPU IP具备高度可配置、可扩展的架构,支持混合精度计算、稀疏化优化和并行处理。其设计融合了高效的内存管理与稀疏感知加速技术,显著降低计算负载与延迟,确保AI处理流畅、响应迅速。该NPU支持数百种AI算法,如AI降噪(AI-NR)和AI超分(AI-SR)等,并兼容Stable Diffusion和LLaMA-7B等主流AI模型。同时,该NPU IP还可与芯原其他处理器IP无缝集成,实现异构计算,助力SoC设计者打造满足多元化应用需求的AI解决方案。
此外,芯原的超低能耗NPU IP还支持TensorFlow Lite、ONNX和PyTorch等主流AI框架,可加速客户在不同AI应用场景中的部署进程并简化集成工作。
“智能手机等移动设备正逐步演变为个人AI服务器。随着生成式AI(AIGC)和多模态大语言模型技术的快速发展,市场对AI算力的需求呈指数级增长,并已成为移动产品的关键差异化要素。”芯原首席战略官、执行副总裁、IP事业部总经理戴伟进表示,“在支持高强度AI计算负载的过程中,能耗控制是最关键的挑战之一。芯原持续深耕面向智慧手机和AI PC的超低能耗的NPU研发,并通过与主流SoC合作伙伴的紧密协作,见证了该技术在新一代智慧手机和AI PC中实现量产。”
关于芯原
芯原微电子(上海)股份有限公司(芯原股份,688521.SH)是一家依托自主半导体IP,为客户提供平台化、全方位、一站式芯片定制服务和半导体IP授权服务的企业。
书赞桉诺亮相2022年上海纸浆周,用实际行动践
DEGIRO将欧洲在线经纪业务零售化
CNE Direct, Inc 商业名称“illumy
Snowplus在疫情期间仍实现全球业务增长
知临集团首席执行官认购本公司股份
AGC推出不使用表面活性剂及含氟聚合溶剂的创新
北美首台搭载nLIGHT技术的AMCM M290-2 FLX
三叶草生物制药启动武汉冠状病毒重组疫苗的研
智原科技将于ICCAD 2020展出最新IoT/MCU
衡水市公安机关全方位多元化宣传,打好“亮剑
袁匡任——2019年最受人民喜爱的艺术家
壳牌新能源部署Beacon Platform以开发
铠侠推出PCIe(R) 4.0 SCM
Velodyne Lidar荣获2022年SXSW创新奖
全球领导人齐聚一堂出席10.14日的2021年全球包容
博莱克威奇为使用点制氢提供指导,以推进车辆
QpiAI完成650万美元A轮前融资
FLIR Systems获得美国国防部4,810万美元合同
水木未来宣布完成天使轮融资
遵义电力:当好产业发展的“先行军”
ROSEN鼓励D-MARKET股东聘请律师
中医秉承一脉传 顶礼尚师北京宴
SSA Marine任命Nicolas Gauthie
米尔肯研究院和莫特赛比基金会启动技术奖励计