1 从Apple Intelligence到IoT Intelligence,端侧生成式AI时代加速到来-德赢Vwin官网 网
0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

从Apple Intelligence到IoT Intelligence,端侧生成式AI时代加速到来

美格智能 2024-09-11 08:01 次阅读

9月10日凌晨1点,苹果新品发布会如期举行,全新iPhone16系列成为苹果生态中真正意义上的第一款原生AI手机,在第二代3nm工艺A18和A18 Pro芯片的加持下,iPhone16系列能够容纳并快速运行以Apple Intelligence为中心的生成式AI功能在手机端侧运行。用库克的话说:“新一代iPhone彻彻底底为Apple Intelligence打造”。

f10c9a90-6fd0-11ef-bb4b-92fbcf53809c.jpg

本次发布会的主要亮点除苹果新增的相机控制按钮外,主要集中在苹果对AI生态的全面构建方面。在理解苹果发布会的新功能之前,先带大家回顾一下苹果在生成式AI方面的主要成果。

具体来说,苹果开发了两种全新基础语言模型,构成了苹果Apple Intelligence的核心:一个是可以在苹果云服务器中运行的较大参数的大语言模型(LLM),称为AFM-server,专为密集型任务设计,并使用私人云计算(Private Cloud Compute)的系统来保护用户数据;另一个是端侧小语言模型(SLM)AFM-on-device,大约有30亿参数,通过对大语言模型进行剪枝、蒸馏,并通过精选的高质量数据训练和架构调整而来,优化后可以在iPhone和其他终端设备上运行,具备更高效率和响应能力。

苹果为何可以称为重新定义了AI手机?

苹果的AI战略通过整合操作系统、软件、模型和数据,强化了对应用场景的理解,训练出了能够深刻洞察用户需求并帮助用户决策的AI Agent。

简单来讲,相较于各类传统的生成式AI应用工具,苹果将AI功能融合到用户使用手机的每一个环节,通过手机端侧运行的小语言模型能力让智能手机真正成为日常生活、办公、娱乐的私人管家,它会收集整理手机端本地的各类信息,在用户使用或有需要时主动提供建议或直接帮助实现。

并且因为其端侧模型在本地运行的特性,可以充分保护用户的隐私信息安全、提升信息反馈效率。可以说每一个搭载了AI功能的苹果手机都是一个独立的个体。

为何大厂们最终选择了端侧AI赛道?

在大语言模型产品的实际应用中,从业者们逐渐意识到大模型存在产品训练成本高、算力需求高、资源消耗大等难点,以及应用适配性差、网络传输不稳定等缺点。在此背景下,AI模型的发展正在着力摆脱网络、参数的多方限制,努力向更简单、更小体量,为应用场景量身定制和跨应用生态的智能化转变。

在端侧AI的实际应用方面,2023年3月谷歌推出参数规模达5620亿的PaLM-E的大模型,并在同年10月发布搭载Google AI基础功能的Pixel 8系列手机。2023年11月,vivo发布1750亿规模的自研蓝心大模型,落地终端侧70亿参数大语言模型;2024年9月6日,荣耀CEO赵明在2024德国柏林消费电子展IFA上面向全球推出行业首个跨应用开放生态AI Agent。

f142abc6-6fd0-11ef-bb4b-92fbcf53809c.jpg

不难看出,端侧小模型将成为未来智能手机乃至各类智能终端的语言模型应用样本。IDC(国际数据公司)预计2024年全球新一代 AI 手机的出货量将超过1.7亿部,约占智能手机整体出货量的15%,Counterpoint预计2027年出货量达到5.22亿部,渗透率达到40%。从大厂们的选择不难看出,随着端侧算力的提升,端侧AI成为大模型终端落地的最优解,模型语言与应用生态融合发展的AI Agent成为未来的趋势。

随着软硬件技术的高速发展,相信除智能手机外,各类IoT终端产品也将逐步落地端侧AI,相关硬件算力和通信交互需求也将持续增长。

美格智能持续加码高算力AI模组研发

与行业伙伴共建端侧AI新生态

洞察到端侧AI的优势和广阔前景,美格智能围绕高算力、大带宽、低功耗、广链接,打造多款高算力AI模组产品,为端侧小语言模型落地提供12Tops~48Tops算力支持。

在模组强大算力的支持下,不仅能够在模组上成功运行Stable Diffusion、LLaMA-2、通义千问Qwen、百川大模型、RedPajama、ChatGLM2、Vicuna等大模型产品,展现出卓越的边缘端大模型部署能力,同时模组产品丰富的外围接口,能够以AI模组的形式将语音识别机器视觉、导航、定位、避障和多模态技术通过各种传感器植入到终端侧,帮助终端产品快速收集和整合信息,打造不断学习进步的智能“大脑”,助力客户快速实现端侧AI落地应用,节约开发成本。

同时,面对端侧AI与物联网生态融合发展的新趋势,美格智能以智能车载为切入打造端云协作的智能物联网解决方案。以美格智能在2023年即已发布的车规级5G R16/R17 + C-V2X系列模组为例,该模组具备的5G通信能力和高算力成为端侧+云端结合的混合式AI的落地形式之一,可广泛应用于AI Agent智能座舱、高阶辅助驾驶、无人驾驶、车路云一体化相关领域。

在通信方面,相关模组产品符合3GPP Release 16/17标准,支持5G NR 独立组网(SA)和非独立组网(NSA),兼容全球主流国家和地区的频段,支持选配C-V2X功能,使用全球统一的ITS 5.9GHz频段部署V2X应用,可采用PC5 Mode4模式直连通信,内置ECDSA硬件引擎,可实现高达6000次/秒的C-V2X验签性能,具备在高速移动环境中提供远距离传输、大带宽、低延时连接的优越性能;在算力方面,模组内置多核心CPU处理器,最大支持22K的算力,在充足算力的支持下,车辆可基于C-V2X构建网联智能,实现由端侧车载计算、路侧边缘计算和中心云计算构成的分级、网络化智能决策与控制,快速进行如车辆碰撞预警、车速引导、红绿灯信息获取等应用。

端侧AI是大模型技术落地的最优解,而端侧AI与云侧大模型协同的混合式AI被行业从业者称为“大模型时代的终极范式”,充分适配智能座舱、智能机器人、手持终端、AR/VR眼镜等产品,成为人工智能落地应用的新方向。同时混合式AI生态的发展又对终端的无线通信能力和算力提出了新的要求,集成了4G/5G 通信能力和高算力芯片以及众多功能接口的智能模组和高算力AI模组,或将成为智能终端厂商们的首选。

从苹果的选择来看,随着端侧算力的不断增长和大模型技术的持续演进,终端侧AI与混合式AI或许将成为大模型时代的最终选择。美格智能也将持续不断推出高算力模组和智能模组解决方案,以模组+解决方案双轮驱动,支持更广泛的垂直领域和合作伙伴共同引领生态发展,以先进的无线通信和AI技术加快实现万物智联的美好愿景。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表德赢Vwin官网 网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • iPhone
    +关注

    关注

    28

    文章

    13460

    浏览量

    201638
  • Apple
    +关注

    关注

    1

    文章

    929

    浏览量

    52790
  • AI
    AI
    +关注

    关注

    87

    文章

    30726

    浏览量

    268870
收藏 人收藏

    评论

    相关推荐

    中信建投建议关注AI模组机会

    析,OpenAI在其“连续12天直播发布”的第5天宣布,支持Apple Intelligence的苹果设备现已能够开启ChatGPT功能。这一消息不仅显示了AI技术在消费级市场的广泛应用潜力,也预示着
    的头像 发表于 12-17 14:05 210次阅读

    炬芯科技周正宇:Actions Intelligence AI音频芯未来

    的全部潜力,AI计算必须合理的分配在云端服务器和装置(如PC,手机,汽车, IoT装置),而不是让云端承载所有的AI负荷。这种云端和
    的头像 发表于 11-08 10:22 258次阅读

    苹果发布Apple Intelligence开发者测试版

    此下跌超过3%。 据苹果官方介绍,Apple Intelligence预览版已经面向开发者和部分用户开放,但正式的公开版本将作为iOS 18.1的一部分,在下周正式发布。届时,备受瞩目的生成
    的头像 发表于 10-24 09:57 313次阅读

    库克访华透露Apple Intelligence国内上线进展

    10月23日,苹果CEO库克到访新浪总部,期间有现场观众询问关于Apple Intelligence服务在国内何时上线的问题。库克对此回应称,苹果正在积极推进相关工作,但这一服务上线背后涉及一个具体的监管流程,需要完成所有必要步骤,并希望能尽快为中国消费者带来这一服务。
    的头像 发表于 10-23 11:47 436次阅读

    Apple Intelligence未达预期,iPhone 16销量受挫,AI全球化挑战浮现

    苹果公司今年的重头戏——Apple Intelligence本应成为推动iPhone 16销量飙升的“杀手锏”,然而现实却给市场泼了一盆冷水。iPhone 16系列的首周末预售销量较去年iPhone
    的头像 发表于 09-20 14:45 627次阅读

    苹果布局未来AI战略,Apple Intelligence引领智能新纪元

    在科技界不断探索人工智能前沿的浪潮中,苹果公司于8月27日通过外媒宣布了一项重大决定:将在人工智能领域开辟新径,独立于现有的Siri系统之外,全力研发新一代AI技术——Apple Intelligence。这一举措标志着苹果公司
    的头像 发表于 08-27 15:03 533次阅读

    苹果Apple Intelligence功能将暂不支持中国市场

    据报道,研究人员最新的iOS 18.1及macOS 15.1 Sequoia Beta1升级代码中发现,即将面世的Apple Intelligence功能在中国市场尚未规划。以下细述
    的头像 发表于 08-07 17:08 887次阅读

    苹果揭示AI新动向:Apple Intelligence模型在谷歌云端芯片上预训练

    苹果公司在最新的技术论文中披露了一项重要信息,其全新的人工智能系统Apple Intelligence所依赖的模型并非传统上大型科技公司首选的NVIDIA GPU,而是选择了在谷歌设计的云端芯片上进行预训练。这一决定不仅打破了行业常规,还预示着大型科技公司在
    的头像 发表于 07-30 15:00 525次阅读

    苹果Intelligence或与原本预定iOS 18亮相的时间有所延迟

    苹果公司精心打造的人工智能(AI)功能——Apple Intelligence或许会与原本预定的iOS 18首次亮相的时间有所延迟。   据了解,苹果公司本有意将Apple
    的头像 发表于 07-29 15:16 539次阅读

    Atlassian Intelligence工具集解析:自然语言JQL处理,虚拟代理到AI摘要等

    ,利用合乎道德的AI模型来加速组织的现有能力。通过人机协作,用户可以卸下繁琐、重复的任务,专注于自己的实际技能,并执行更有影响力的工作。 Atlassian Intelligence旨在通过以下方式释放
    的头像 发表于 07-22 10:49 289次阅读

    深入解析Atlassian Intelligence最新AI功能:编辑器中的生成AI、智能摘要、AI工作分解、虚拟代理等

    。他们表示,平均每周可节省45分钟以上的时间,展示了AI是如何提高人类工作表现的。 但正如我们从一开始就说过的,这仅仅是个开始。更多Atlassian Intelligence功能将在Atlassian
    的头像 发表于 07-16 18:23 559次阅读
    深入解析Atlassian <b class='flag-5'>Intelligence</b>最新<b class='flag-5'>AI</b>功能:编辑器中的<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>、智能摘要、<b class='flag-5'>AI</b>工作分解、虚拟代理等

    Siri更新预告:Apple Intelligence AI系统预计2025年春随iOS 18.4面世

    在于,苹果将通过iOS 18.4的系统更新,向全球用户全面推出其自主研发的Apple Intelligence AI系统,为Siri赋予前所未有的智能能力。
    的头像 发表于 07-08 16:27 889次阅读

    苹果Apple Intelligence功能受限:AI发展的存储瓶颈凸显

    Intelligence功能,因受到存储限制的影响,无法在其所有设备上全面使用,这一状况无疑揭示了苹果在AI发展上的存储瓶颈。
    的头像 发表于 06-14 14:15 641次阅读

    生成AI加速向终端演进,NPU、异构计算提供强大算力支持

    德赢Vwin官网 网报道(文/李弯弯)生成AI是一种通过学习大规模数据集生成新的原创内容的新型AI。Bloomberg
    的头像 发表于 03-16 00:16 2861次阅读

    荣耀引领AI时代

    在今年的MWC盛会上,荣耀宣布与高通、Meta携手,将70亿参数大模型引入,这一创新举措预示着AI
    的头像 发表于 03-01 10:28 629次阅读