1 大算力芯片面临的技术挑战和解决策略-德赢Vwin官网 网
0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大算力芯片面临的技术挑战和解决策略

亿铸科技 来源:亿铸科技 2024-10-23 14:50 次阅读

在湾芯展SEMiBAY2024《HBM与存储器技术与应用论坛》上,亿铸科技创始人、董事长兼CEO熊大鹏发表了题为《超越极限:大算力芯片面临的技术挑战和解决策略》的演讲。

熊大鹏博士提出,在AI大模型技术的推动下,算力迎来需求拐点,硬件架构将成为满足算力需求的关键路径之一,未来算力增长将以存储单元为中心

大模型时代的机遇与挑战

在AI大模型时代,随着数据、算力、参数量的不断提升,模型能力显著增强。熊大鹏博士指出,大模型已经从量变逐渐演变为质变,当模型体量足够大时,会出现类似人类“开悟”的涌现能力,大模型的推理能力将显著提升。这一变化预示着AI应用的最后一公里即将打通,业务落地将推动对AI计算能力的需求迎来拐点。

Omdia最新报告《云计算和数据中心人工智能处理器预测》显示,用于云计算和数据中心人工智能的GPU和其他加速芯片的市场规模已从2022年的不到100亿美元增长到2024年的780亿美元,并预计到2029年将达到1510亿美元。然而,2026年市场可能会出现一个明显的拐点,增长动力将从技术采用转向人工智能应用需求的变化。

此外,IDC预测,未来的人工智能服务器将注重提高计算能力和处理效率(能效比),以适应更复杂、更大规模的人工智能应用。预计到2027年,用于推理的AI算力占比将达到72.6%,未来有望达到95%为推理,5%为训练。

应用落地需要硬件架构突破

然而,现有的芯片硬件性能提升速度已难以满足算法模型急剧增长的算力需求。摩尔定律,这个曾经指导半导体行业发展的黄金法则,如今正面临前所未有的挑战。国信证券经济研究所报告指出,大模型参数规模每18个月增长35倍,而摩尔定律下的芯片仅增长2倍。因此,探索和发展新的硬件架构成为算力突破的关键路径之一。

熊大鹏博士强调,在现有的硬件架构下,目前AI芯片面临着“三堵墙”问题:存储墙、能耗墙和编译墙。存储墙是指存储器的数据访问速度跟不上计算单元的数据处理速度,导致性能瓶颈的问题。

同时,由于存储墙的存在则带来了能耗墙和编译墙的问题。能耗墙是指随着芯片性能的提升,能耗和散热问题成为限制进一步性能提升的主要因素。编译墙则是随着AI模型的复杂性增加,编译器需要处理的数据量和计算任务也急剧增加,这使得静态编译优化变得非常困难,手动优化又消耗了大量时间和成本。

存算一体开启算力第二增长曲线

面对这一挑战,亿铸科技选择创新,用“存算一体超异构”架构这一全新的芯片设计思路,极大地减少了数据搬运的延迟,提升了整体的计算效率和能效比。

熊大鹏博士指出,想要打破AI芯片“三堵墙”,就需要从算力的第一性原理(阿姆达尔定律)来着手,将数据搬运量大幅下降,使得F值接近于0,才能保证有效算力密度线性增长。目前业内主要存在两种解决方式:一种是存内计算,另一种是近存计算。

存内计算是通过将存储和计算功能融合,减少数据搬运延迟,提升性能和能效。在理想状态下,F=0,能够实现存储与计算无缝融合。近存计算则是将存储单元和计算单元通过先进封装集成在一起,增加访存带宽、减少数据搬移时延,以提升整体计算效率。

熊大鹏博士强调,通过存算一体架构等技术,可以突破传统计算模式的瓶颈,实现更高的有效算力,打破有效算力的天花板。未来,以算力单元为中心的时代即将结束,算力第二增长曲线将以存储单元为中心。

熊大鹏博士表示,亿铸科技自成立以来,始终致力于通过存算一体,提供贡献更具性价比、更高能效比、更大算力发展空间的AI大算力芯片发展新路径。2023年3月,面对ChatGPT等大模型带来的AI算力挑战,亿铸科技首次提出“存算一体超异构”,为大模型时代AI大算力芯片发展提供全新思路。

未来,随着AI技术的不断进步,算力的需求也在不断增长。亿铸科技将通过创新的存算一体架构,为AI芯片的发展提供新的方向。在大模型时代,亿铸科技的技术和产品将为AI技术的发展提供强大的支持,推动整个行业向前发展。随着亿铸科技技术的不断成熟和应用的不断扩展,我们有理由期待,AI芯片技术将迎来一个新的发展阶段,为科技进步做出更大的贡献!

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表德赢Vwin官网 网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    455

    文章

    50711

    浏览量

    423098
  • 算力
    +关注

    关注

    1

    文章

    964

    浏览量

    14790
  • 亿铸科技
    +关注

    关注

    0

    文章

    24

    浏览量

    1377

原文标题:亿新闻 | 湾芯展演讲回顾:以AI芯片架构创新,迎接算力增长新拐点

文章出处:【微信号:亿铸科技,微信公众号:亿铸科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    亿铸科技熊大鹏探讨AI大芯片挑战与解决策略

    在SEMiBAY2024《HBM与存储器技术与应用论坛》上,亿铸科技的创始人、董事长兼CEO熊大鹏博士发表了题为《超越极限:大芯片技术
    的头像 发表于 10-25 11:52 378次阅读

    【「芯片 | 高性能 CPU/GPU/NPU 微架构分析」阅读体验】--全书概览

    本帖最后由 1653149838.791300 于 2024-10-16 22:19 编辑 感谢平台提供的书籍,厚厚的一本,很有分量,感谢作者的倾力付出成书。 本书主要讲芯片CPU
    发表于 10-15 22:08

    中国大会召开,业界首个高质量评估体系发布

    首次完整地构建了人工智能时代高质量的理论体系,并探索性提出业界首个 "五位一体"的高质量评估体系。 发布现场 在当前由大模型和AIGC驱动的AI时代,
    的头像 发表于 09-28 16:50 260次阅读
    中国<b class='flag-5'>算</b><b class='flag-5'>力</b>大会召开,业界首个<b class='flag-5'>算</b><b class='flag-5'>力</b>高质量评估体系发布

    MCT8316A-设计挑战和解决方案应用说明

    德赢Vwin官网 网站提供《MCT8316A-设计挑战和解决方案应用说明.pdf》资料免费下载
    发表于 09-13 09:52 0次下载
    MCT8316A-设计<b class='flag-5'>挑战和解</b>决方案应用说明

    MCF8316A-设计挑战和解决方案应用说明

    德赢Vwin官网 网站提供《MCF8316A-设计挑战和解决方案应用说明.pdf》资料免费下载
    发表于 09-13 09:51 0次下载
    MCF8316A-设计<b class='flag-5'>挑战和解</b>决方案应用说明

    名单公布!【书籍评测活动NO.43】 芯片 | 高性能 CPU/GPU/NPU 微架构分析

    ,在全球范围内,对于推动科技进步、经济发展及社会整体的运作具有至关重要的作用。随着信息技术的高速发展,高性能计算(HPC)和人工智能(AI)等技术在多个领域的应用变得日益广泛,芯片
    发表于 09-02 10:09

    亿铸科技谈大芯片面临技术挑战和解决策略

    随着人工智能技术的飞速发展,已成为推动产业变革的关键力量,但大模型的快速发展,参数的爆发,对于需求也提出了更高的要求,带来了全新的
    的头像 发表于 08-07 10:03 734次阅读

    FPGA设计面临挑战和解决方案

    设计可靠的可编程逻辑门阵列(FPGA)对于不容故障的系统来说是一项具有挑战性的任务。本文介绍FPGA设计的复杂性,重点关注如何在提高可靠性的同时管理随之带来的功耗增加、设计复杂性和潜在性能影响的关键平衡问题。
    的头像 发表于 08-06 11:33 444次阅读

    浪潮下,国产先进封装技术取得了怎样的成绩?面临怎样的挑战

    德赢Vwin官网 网报道(文/吴子鹏)随着摩尔定律速度放缓,近几年先进封装技术成为大芯片发展的主要推动力。得益于人工智能应用的
    的头像 发表于 07-22 00:08 4143次阅读
    大<b class='flag-5'>算</b><b class='flag-5'>力</b>浪潮下,国产先进封装<b class='flag-5'>技术</b>取得了怎样的成绩?<b class='flag-5'>面临</b>怎样的<b class='flag-5'>挑战</b>?

    基础设施的风险与挑战

    编者按网络有一个美好的愿景,就是希望网,能像电力和电网一样:
    的头像 发表于 06-13 08:27 539次阅读
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基础设施的风险与<b class='flag-5'>挑战</b>

    揭秘芯片:为何它如此关键?

    在数字化时代,芯片作为电子设备的核心组件,其性能直接关系到设备的运行速度和处理能力。而芯片,即其计算能力,更是衡量芯片性能的重要指标。
    的头像 发表于 05-09 08:27 993次阅读
    揭秘<b class='flag-5'>芯片</b><b class='flag-5'>算</b><b class='flag-5'>力</b>:为何它如此关键?

    芯片:未来科技的加速器?

    在数字化时代,芯片作为电子设备的核心组件,其性能直接关系到设备的运行速度和处理能力。而芯片,即其计算能力,更是衡量芯片性能的重要指标。
    的头像 发表于 02-27 09:42 925次阅读
    高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>芯片</b>:未来科技的加速器?

    大茉莉X16-P,5800M大称王称霸

    Rykj365
    发布于 :2024年01月25日 14:54:52

    是德科技智能‘芯’技术研讨会回顾

    2023年12月20日,是德科技成功举办了智能‘芯’技术研讨会。此次研讨会由是德科技的行业市场经理周巍策划并主持,研讨会聚焦网络,
    的头像 发表于 01-17 09:34 722次阅读

    网络面临三大挑战

    2024年,以AIGC为代表的人工智能技术将进一步激发需求,网络、智中心、超
    的头像 发表于 01-12 10:39 1089次阅读