1 中国电信发布全球首个单体稠密万亿参数语义模型-德赢Vwin官网 网
0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

中国电信发布全球首个单体稠密万亿参数语义模型

CHANBAEK 来源:网络整理 2024-06-20 10:50 次阅读

近日,中国电信人工智能研究院(TeleAI)携手北京智源人工智能研究院,共同推出了全球首个单体稠密万亿参数语义模型——Tele-FLM-1T,这一里程碑式的成就标志着中国电信在人工智能领域取得了重大突破,并成为了国内首批发布稠密万亿参数大模型的机构。

面对大模型训练过程中算力消耗巨大的挑战,TeleAI与智源研究院并未止步于传统方法。他们基于模型生长和损失预测等关键技术,共同研发出了Tele-FLM系列模型。这一模型不仅实现了高效的训练过程,而且仅使用了业界普通训练方案9%的算力资源。这意味着,在相同的计算资源下,Tele-FLM系列模型能够处理更多的数据,完成更复杂的任务,大大提高了算力的利用效率。

值得一提的是,Tele-FLM-1T模型的训练过程仅在112台A800服务器上进行了4个月的时间,就完成了总计2.3T tokens的训练。这一速度之快、效率之高,在业界堪称罕见。这一成果的取得,不仅得益于TeleAI与智源研究院的精湛技术,更得益于他们对人工智能领域的深刻理解和不懈追求。

Tele-FLM-1T模型的发布,不仅展示了中国电信在人工智能领域的实力,也为整个行业带来了新的启示。未来,随着技术的不断进步和应用的不断拓展,我们有理由相信,中国电信将继续在人工智能领域发挥更大的作用,为人类社会的进步和发展做出更大的贡献。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表德赢Vwin官网 网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 中国电信
    +关注

    关注

    22

    文章

    3453

    浏览量

    62250
  • 人工智能
    +关注

    关注

    1791

    文章

    47182

    浏览量

    238195
  • 模型
    +关注

    关注

    1

    文章

    3226

    浏览量

    48804
收藏 人收藏

    评论

    相关推荐

    中国电信发布自研视频生成大模型

    中国电信隆重发布首个由央企全自研的视频生成大模型。该模型采用了创新的“VAST(Video As Storyboard from Tex
    的头像 发表于 12-13 15:40 141次阅读

    中国电信成立天通卫星公司

    据企查查APP数据显示,中国电信全资持股的天通卫星科技(深圳)有限公司正式成立,注册资本高达10亿元,经营范围包含:卫星遥感数据处理;卫星遥感应用系统集成;物联网设备销售;卫星导航多模增强应用服务
    的头像 发表于 12-04 14:56 344次阅读

    海格通信参与中国电信北斗短报文终端伙伴合作计划

    近日,中国电信数智渠道终端生态合作暨中国电信终端产业联盟第十五次会员大会在广州举行,海格通信(SZ 002465)作为中国电信终端及产业链上下游头部企业受邀出席。海格通信副总经理、研究院院长邓珂代表
    的头像 发表于 12-04 11:40 266次阅读

    中软国际入选中国电信广东公司大模型生态伙伴库

    近日,中软国际成功入选中国电信广东公司大模型生态伙伴库,此举标志着中软国际在人工智能领域的技术实力和服务能力获得认可,双方将携手共建大模型生态,推动人工智能技术在各行业的应用落地。
    的头像 发表于 10-10 11:18 484次阅读

    中国电信人工智能研究院完成首个全国产化万卡万参大模型训练

    近日,中国电信人工智能研究院宣布了一项重大技术突破:成功完成国内首个基于全国产化万卡集群训练的万亿参数模型
    的头像 发表于 09-30 16:41 1680次阅读

    中国电信上海、北京两个万卡集群已经投产

    中国电信在智算领域的发展迎来重要里程碑。近日,中国电信宣布,其上海、北京两个万卡智算集群已正式投产运行,标志着中国电信在构建大规模智算能力方面取得了显著进展。
    的头像 发表于 08-09 17:47 725次阅读

    中国电信发布星辰大模型软件工厂

    在科技日新月异的今天,人工智能正以前所未有的速度渗透并改变着各行各业,其中,软件开发领域更是迎来了颠覆性的变革。2024年世界人工智能大会的璀璨舞台上,中国电信人工智能科技有限公司携手中国电信
    的头像 发表于 07-10 15:42 936次阅读

    中国电信研究院发布业界首个RISC-V视频转码卡TeleVPU

    中国电信研究院于5月25日的2024智算云生态大会•智算云论坛中推出全球首款RISC-V视频转码卡TeleVPU。
    的头像 发表于 05-31 10:45 976次阅读

    中国电信发布首个支持30种方言混说语音大模型

    中国电信人工智能研究院(TeleAI)近日发布了一项引领业界的语音识别技术——星辰超多方言语音识别大模型。这一模型突破性地支持30种方言的自由混说识别,打破了传统单一
    的头像 发表于 05-28 09:14 570次阅读

    商汤科技与中国电信上海公司达成战略合作

    近日,中国电信上海公司隆重召开发布会,宣布全球最大新型城域网——“智云上海”正式上线。这一项目不仅是国内首个实现“全城上云”的城市级云网,更标志着上海在数字化建设中迈出了坚实步伐。
    的头像 发表于 05-21 15:01 870次阅读

    中国电信和GSMA成立全球首个Open Gateway联合开放实验室

    GSMA与中国电信在北京携手共创,正式成立了全球首个Open Gateway联合开放实验室,即GSMA-中国电信Open Gateway Open Lab。这一创举旨在为广大开发者提供
    的头像 发表于 05-14 09:25 492次阅读

    中国电信实现全球首个NR NTN(非地面网络)业务应用试点

    此次业务试点在舟山海域利用亚洲九号卫星进行,在10海里内的商业船舶航线上,实现了NR NTN对坐船乘客的语音与丰富网络通信。截至2023年10月,中国电信正式完成了全球第一家运营商NR NTN现网连通性的实验验证工作。
    的头像 发表于 04-02 16:00 560次阅读

    中国电信中国联通发布年度业绩

    中国电信在业绩发布会上表示,其成功抓住了数字经济的发展机遇,全力推动基础业务向数字化转变,丰富数字化产品供应,稳固了基础业务的增长趋势。
    的头像 发表于 03-05 11:38 527次阅读

    中兴通讯参与中国电信天翼云全球发布,助力天翼云扬帆起航

    2月27日,在MWC24巴塞罗那,中国电信云网高峰论坛顺利举办,全球通信业领袖和专家代表云集,共同探讨释放全球互连的数字潜力。
    的头像 发表于 03-01 17:24 990次阅读

    中国电信规划在上海建设首个国产超大规模算力液冷集群

    中国电信规划建设首个国产超大规模算力液冷集群 人工智能技术的快速发展催生了巨大的算力需求;中国电信规划在上海规划建设可支持万亿参数
    的头像 发表于 02-22 18:48 1325次阅读