新闻中心

EEPW首页 > 智能计算 > 业界动态 > MediaTek运用MetaLlama 2大语言模型,赋能终端设备生成式AI应用

MediaTek运用MetaLlama 2大语言模型,赋能终端设备生成式AI应用

作者:牛饼干时间:2023-08-24来源:中关村在线收藏

2023年8月24日– 今日宣布利用Meta新一代开源大语言模型(LLM)Llama2以及先进的AI处理器(APU)和完整的AI开发平台(NeuroPilot),建立完整的终端侧AI计算生态,加速智能手机、物联网、汽车、智能家居和其他边缘设备的AI应用开发,为终端设备提供更安全、可靠和差异化的使用体验。预计年末采用新一代天玑旗舰移动芯片的智能手机支持由Llama2模型开发的AI应用,可为用户带来振奋人心的生成式AI应用体验。

本文引用地址:http://www.eepw.com.cn/article/202308/449907.htm


MediaTek资深副总经理暨无线通信事业部总经理徐敬全博士表示:“生成式AI的日益普及是数字化转型的重要趋势之一,我们的愿景是为Llama2的开发者和终端用户提供工具,带来更多令人兴奋的AI创新机遇和产品体验。通过与Meta的伙伴关系,MediaTek可提供更强大的硬件和软件整体解决方案,为终端设备带来远超以往的功能和体验。”

目前,大多数生成式AI都依赖云计算,MediaTek基于Llama2模型成功实现直接在终端设备上运行生成式AI应用。这将为开发者和用户提供独特优势,包括无缝的使用体验,更强的用户信息安全和可靠性,更低延迟,离线运算的能力以及更低的运营成本,让每个人都能享受到生成式AI带来的便捷与创新。

要在终端设备上充分释放生成式AI的潜力,设备制造商需采用高算力、低功耗的AI处理器(APU),并通过更快、更可靠的网络连接来增强设备的整体算力。如今,每一颗MediaTek5G智能手机SoC均搭载AI处理器,已广泛执行生成式AI应用成功案例,例如AI降噪(AI-NR)、AI超级分辨率(AI-SR)以及AI运动补偿(AI-MEMC)等。

MediaTek将于年末推出新一代旗舰移动芯片,将采用针对Llama2模型而优化的软件栈(NeuroPilot),与搭配支持Transformer模型做骨干网络加速的升级版AI处理器(APU),可减少动态随机存取内存(DRAM)的读写消耗和带宽占用,进一步强化大语言模型和生成式AI应用的性能,助力开发者打造令人惊艳的AI应用,加速终端设备AI应用落地发展。



关键词: MediaTek

评论


相关推荐

技术专区

关闭