• 首页
  • 粮食
  • 蔬菜
  • 果品
  • 水产
  • 酒水
  • 饮料
  • 茶叶
  • 畜禽
  • 食用油
  • 资讯
logo
  • 首页>
  • 果品 >
  • 正文

【全球时快讯】中国工程院院士高文:鹏城云脑Ⅱ和鹏城云脑Ⅲ可以解决目前所有大模型的训练

2023-05-25 19:13:54 来源:界面新闻

5月22日,在2023大湾区科学论坛上,鹏城实验室发布了鹏城·星云系统和星方数据——这是支撑国际大科学计划和工程的需求、聚焦天文和遥感两大学科的科研云平台。

鹏城星云系统依托于“鹏城云脑Ⅱ”而构建。鹏城云脑Ⅱ是国产自主的首个E级AI算力平台,根据中国工程院院士、鹏城实验室主任高文的介绍,是“10的18次方、每秒16位复点运算的机器平台”。目前,云脑Ⅱ已经连续五次在超算打榜获得世界第一。


(相关资料图)

成立于2018年的鹏城实验室位于深圳,主要从事网络空间信息研究,定位为省级实验室;2022年被列入国家实验室。

相比之下,鹏城实验室的合作伙伴知名度或许更高——此前百度发布的全球首个知识增强千亿大模型百度文心、华为发布的首个千亿级生成和理解中文NLP大模型盘古大模型,均有鹏城实验室的研发参与。

ChatGPT带火了整个人工智能产业,也让焦点集中在大模型上。高文指出,ChatGPT之所以能对整个技术发展带来这么大冲击,最关键的是它使用了大模型。

从人工智能行业出发,如何将训练好的模型从一个领域迁移到另外一个领域,始终是一个难题,因为不可能依赖于大量人力去标注数据。

国际欧亚科学院院士李世鹏表示,大模型是解决这个瓶颈的方法,“采用一种预训练模式,对所有数据进行非监督学习,形成大模型后再进行微调,落实到具体的应用场景。”

“其实模型本身很简单,就是生物学里面神经元的一个连接。但是因为它规模大,就起到非常理想的结果。所以规模是大模型里最核心的东西。”高文表示,规模需要靠三方面结合:巨大的算力、海量数据和足够好的算法。例如ChatGPT就是微软为其提供算力,提供了约1万块A100芯片的算力服务器支持。

高文提到,中国也有这样的算力,在2020年推出的云脑Ⅱ,相当于4000块A100芯片组合出来的机器,既可以做理论研究,也可以做核心技术,或者一些比较大的应用。

云脑Ⅱ的诞生让鹏城实验室的AI算力从100P上升到1000P。举例来说,24小时内能训练100亿张图像,或1亿人的DNA、或1千万小时语音、或1万天的自动驾驶数据等,是52万台家用电脑算力之和。

“我们现在正在设计下一台3.2万块卡的机器,这台机器的能力会比微软的机器还强,是后者能力的三倍,确保为人工智能训练持续提供强有力的算力支持。”高文透露,这台机器大约花费60亿元,算力达到16000P。

“两台机器加在一起,可以解决到目前为止所有大模型的训练。”高文表示,而且以此为核心,现在正在启动中国算力网的建设,将来的算力会像ChatGPT电力一样即插即用。

为了实现这个目标,鹏城实验室现在正推动大模型的开源和底座训练工作。例如云脑Ⅱ,只有1/4是鹏城实验室在用,3/4开放出去,作为大设施开放提供给国内的合作伙伴、高校甚至企业使用,此前也帮助百度、华为训练了一系列大模型。

“鹏城会帮助相关单位训练出GPT的底座来,云脑Ⅱ、云脑Ⅲ会给人工智能大模型提供足够算力,我们也希望合作伙伴提供一些数据。”根据设想,通过鹏城的算力、公开渠道的数据结合,训练出大模型底座向全社会开放。

算力、算法、数据,是人工智能的三大范畴。这也意味着,即使企业的算力不高,也能通过底座完成工作——毕竟ChatGPT一次训练要花费将近1000万美元。而对于云脑Ⅱ等基础设备而言,也有望降低开发工作量。

腾讯首席科学家张正友则指出,因为各种各样的原因,包括隐私、行业数据之间的关系,是不可能做一个模型打遍所有事情的,“如何去解决数据之间的壁垒,将多个模型高效地整合起来,这可能又是一个值得研究和探讨的方向。”

(文章来源:界面新闻)

关键词:

    为您推荐

  • 【全球时快讯】中国工程院院士高文:鹏城云脑Ⅱ和鹏城云脑Ⅲ可以解决目前所有大模型的训练

    果品2023-05-25
  • 天天看热讯:嘉里物流联网为时装品牌引入分货机械人KOOLBee以提升服务效率

    粮食2023-05-25
  • 信息:微星推出泰坦 GP78HX 游戏本:13980HX + RTX 4060 版本 11299元

    果品2023-05-25
  • 东方证券维持快手(01024)“买入”评级 首次实现季度经调整净利润转正

    粮食2023-05-25
  • 2023年的医保划入金额标准 70岁的人要比60岁的人,多划入200元吗?

    果品2023-05-25
  • 天天热门:武汉益禾乔科技有限公司

    粮食2023-05-25
  • 实时焦点:苹果系统镜像文件_苹果系统镜像dmg

    果品2023-05-25
  • 中金所董事长:将丰富产品供给,提升中长期资金参与的广度和深度

    果品2023-05-25
  • 预售价109.8万元 仰望U8发布7款配色

    粮食2023-05-25
  • 天天观热点:光遇国际服5.25复刻先祖在哪 5月25日复刻先祖位置及兑换物品一览表[多图]

    粮食2023-05-25
  • 内蒙古兴安盟迎妙趣横生插秧季 环球百事通

    果品2023-05-25
  • 广州如意坊放射线系统工程项目拆迁方案出炉_全球最新

    粮食2023-05-25
  • 对于英国4月通胀和英镑前景,各大投行怎么看?|动态焦点

    果品2023-05-25
  • 【环球新视野】itunes连接到apple id服务器时出错_连接到icould时出错

    粮食2023-05-25
  • 株洲市四中心理课题获湖南省教育教学研究优秀成果奖_每日播报

    果品2023-05-25
  • 华表奖成了“照妖镜”!张译、张子枫拿奖后,破防人是照明白了!

    果品2023-05-25
  • 海通证券:军工板块业绩有望改善 景气增长可期

    粮食2023-05-25
  • 电商概念震荡走低 焦点科技跌停 环球资讯

    果品2023-05-25
  • 全球快报:顺平县发布大风蓝色预警

    粮食2023-05-25
  • 环球快播:电力股开盘走强,多只电力ETF涨超1%

    果品2023-05-25

果品

  • 【全球时快讯】中国工程院院士高文:鹏城云脑Ⅱ和鹏城云脑Ⅲ可以解决目前所有大模型的训练
  • 信息:微星推出泰坦 GP78HX 游戏本:13980HX + RTX 4060 版本 11299元
  • 2023年的医保划入金额标准 70岁的人要比60岁的人,多划入200元吗?
  • 实时焦点:苹果系统镜像文件_苹果系统镜像dmg
  • 中金所董事长:将丰富产品供给,提升中长期资金参与的广度和深度

蔬菜

  • 说好“一梯一户”却成了“两梯两户”,买方能否解除合同?
  • 更高水平开放合作助力中国东盟经贸发展迎新机遇
  • 9被告人犯侵犯著作权罪被判刑罚
  • 玉渊谭天丨中美再通话,“建设性”很重要
  • 环球时报社评:中美经贸需要建设性对话
  • 俄媒:莫斯科扩大新冠感染新疗法试点范围
  • 冰雪之约 中国之邀 | 追赶的勇气
  • 中国第20批赴黎维和建筑工兵分队完成“VA-2”道路排水系统修缮任务
  • 中国常驻联合国代表团举办恢复联合国合法席位50周年图片展
  • 美专家认为三大原因导致美国供应链危机

Copyright   2015-2022 亚太食品网 版权所有  备案号:沪ICP备2020036824号-11   联系邮箱: 562 66 29@qq.com