笔书阁

第2024章 ai人物观点 算力十问大模型将横扫所有垂直行业(第1页)

《kii人工智能月度报告丨ai人物观点》

关键词:算力十问

沈向洋:大模型将横扫所有垂直行业

“大模型大到一定地步以后就涌现出来。多大才涌现出来?没人讲得清楚。”月日,o全球开者先锋大会在上海开幕,美国国家工程院外籍院士沈向洋在《大模型时代的机遇和挑战》的演讲中分享了关于大模型的五方面思考。

第一,大模型的到来,强迫人类重新思考人机关系。“我们受到的冲击,到底有多少是机器智能的展,有多少是人机交互的震撼。”他认为,不管是什么技术,最终目的是帮助人更好运用机器,不忘初心。

第二,大模型将横扫所有垂直行业。大模型可分为通用大模型、行业大模型、企业大模型和个人大模型。“一个通用大模型如果没有万卡、不上万亿参数,基本上以后就不太好意思说这是一个通用模型了。行业大模型大致上是千亿参数、千亿卡的训练规模。企业大模型可能只需要oo张卡、百亿参数。最有意思的是个人大模型,利用个性化参数,结合云和端,这是非常有意义的。”

第三,算力是门槛。影响算力的两大因素是模型大小和数据规模,随着参数增加,对算力的需求几乎是几何级的。“千卡万卡是钱堆出来的。以前有一句话叫贫穷限制想象力,现在贫穷可能扭曲想象力,因为如果没有卡,能想象要做的项目可能就不太一样了。”

第四,ai带来社会冲击。这些冲击包括对民众的冲击、企业的冲击、政府监管的冲击、社会展的冲击,带来一本正经胡说八道、深度伪造等伦理问题,很多国家开始立法,这需要共同推动治理、向前展。

第五,智能的本质。人工智能蓬勃展,但人们对智能的本质并没有清晰认知。“大模型大到一定地步以后就涌现出来。多大才涌现出来?没人讲得清楚。”沈向洋表示,“很多人相信sga(规模法则),但今天的深度学习,理论非常欠缺。从宇宙到量子,物理学有一套大一统的理论统一起来,叫作theoryofeverythg。今天深度学习没有这样的理论,所以叫作theoryofanythg。”

中国工程院邬贺铨院士:《算力十问》

在第二届“华彩杯”算力创新应用大赛启动会上,中国工程院邬贺铨院士表题为《算力十问》的主旨报告

就算、通算、智算三类算力是否存在合理比例的问题,邬院士认为,不同地区需求不同,不可能有固定的比例。通常国家与区域创新中心城市对算有较大需求;机密性和时延敏感性决定了城市政务数据和重要企业关键数据尽量在同城通算;东部地区的ai训练任务重、智算比例高;西部算力枢纽也需要增加智算能力,但一般西部地区以配置通算为主。

关于算存比,邬院士强调,存力与算力需配合,避免因存力短缺造成算力等待而影响处理效率。而存力按位于服务器内外分为内存与外存,对于cpu密集型计算任务,影响算力效率与性能的主要是内存,据分析合理的算存比是gfopsgb为;对io密集计算任务,需频繁访问外存,如何考虑计入外存力的算存比合理取值,值得商榷。邬贺铨同时指出,存力有hdd机械硬盘和sdd固态硬盘之分,后者可节能o,但我国sdd仅占,不及美国一半。

就边缘与终端算力运用的问题,邬院士认为,当边缘终端具有o亿参数以上的推理能力时,边缘终端可离线进行推理任务,目前手机可支持o亿参数,o年还会出现支持千亿参数的手机。当边缘终端仅具有o亿参数的推理能力时,需要与云端协同提供智能能力。邬院士提出,单终端算力小,数以亿计的终端算力集合就非常可观,但跨终端的协同计算是否可行值得商榷。

关于异地算力节点的协同,邬院士认为,将算力集群扩展到跨域,多个异地的算力节点共同承担一个计算任务,实时性的交互要求光传输系统无损和确定性时延,任何丢包和抖动都无法保证计算效率;在异属异构的场景下异地协同计算的实施可操作性更是挑战。他强调,集约化建设大型算力节点比分布异地协同能够显着提升能效和算力效率,东数西算和数据灾备都需要在异地算力枢纽间建立广域连接,但这仅是算力任务的转移而不是异地实时协同计算。

关于算网协同,邬院士认为,算力与网络往往属于不同的运营主体,跨运营商的协同调度也有管理难题。而且网络通常并不感知所承载的数据属性。当前,先要厘清算网协同的标准与方法,挥ipv的分段选路、srv作为算网协同统一承载协议的作用,通过编程空间实现云网算网的融通。

这章没有结束,请点击下一页继续阅读!

喜欢灵魂交响曲:人工智能日记请大家收藏:()灵魂交响曲:人工智能日记更新度。

就如何解除中小企业使用算力的顾虑,邬院士建议,政府站台主导建设面向中小企业的云智平台,降低企业利用算力的门槛和对安全的担心。

——总结·点评——

沈向洋博士和邬贺铨院士的观点分别从大模型的展趋势和算力的多维度问题出,为理解ai技术演进和基础设施建设的现状与未来提供了深刻洞察。

沈向洋观点概览:

沈向洋认为,大模型(aranguaodes)将在所有垂直行业中扮演颠覆性角色,强调了模型规模的重要性。他指出,未来的通用大模型将以万亿参数为常态,而针对特定行业的模型则可能达到千亿参数级别,即便是企业内部使用的模型也将达到百亿参数量级。沈向洋的观点预示着大模型技术不仅将继续推动自然语言处理等领域的进步,还将广泛渗透至医疗、金融、教育等各行各业,成为推动数字化转型的关键力量。

邬贺铨观点概览:

邬贺铨院士的《算力十问》报告则从算力的需求、分配、效率、协同等多个角度进行了深入探讨。他指出,不同类型的算力(算、通算、智算)需求因地区而异,强调了存算比优化的重要性,并区分了不同类型计算任务对内存与外存的不同依赖。邬贺铨还讨论了边缘计算与终端算力的潜力,提出随着终端设备推理能力的增强,边缘计算与终端协同将成为趋势,但也面临跨终端协同计算的挑战。关于算力节点的异地协同,他认为虽然存在技术与管理上的挑战,但算网协同和标准化工作对于提升整体效能至关重要。针对中小企业,邬贺铨建议政府应挥作用,通过构建云智平台来降低算力使用门槛,增强安全性信心。

两位专家的观点综合展示了ai技术展与算力基础设施建设的广阔前景及面临的实际挑战,指明了技术创新与政策支持对于推动行业展的关键作用。

喜欢灵魂交响曲:人工智能日记请大家收藏:()灵魂交响曲:人工智能日记更新度。

请勿开启浏览器阅读模式,否则将导致章节内容缺失及无法阅读下一章。

狱门疆大小姐不想让五条大少爷出门  [封神]武王孝子、纣王贤孙  [综原神]关于我转生成史莱姆但在提瓦特这档事  奥特,开局一只哥莫拉  张愿喃陈珍宝  [综漫]此子断不可留!  [综]这不是我认识的横滨  逢春  [原神]这不是乙女游戏吗?  早该让法学生整顿横滨了  小齐萌萌  [原神]魔阴身爆改深海龙蜥  [综武侠]目标成为峨眉名宿  [西游]花果山大魔王  安柔柔安晚晚  [ff7]玛丽苏做梦文学  循环恋歌  王子枫袁雯洁  王峰柳雨凝  丧夫后,所有人磕我和重力使的cp  

热门小说推荐
紫藤花游记

紫藤花游记

暗黑大陆的克系生物,阿瓦隆湖畔最后的星之光辉,四海之间的红土大陆,乌鲁克城墙前恢弘的战斗时间的旅程是螺旋的,世界的穿梭是线性的。伊泽杉决定去走一走,看一看。他的伙伴都陷入了永恒的安眠,唯有他,...

穿越之败家福晋

穿越之败家福晋

女主版大纲富察盈玥被脑抽的乾隆陛下赐婚给了十一阿哥,没错就是那个大清有史以来最抠门皇子守财奴爱新觉罗永瑆,富察盈玥累觉不爱于是决定,你当你的守财奴阿哥,我做我的败家福晋,咱们井水不犯河水。...

贪吃蛇特殊干饭技巧

贪吃蛇特殊干饭技巧

明天入v啦,将会掉落大肥章哦,请大家多多支持鸭艾泽拉绑定游戏系统,变成了一条会魔法的贪吃蛇,她妈,一条美丽的白蛇女士强抢了一个人类这样那样后才生下了她,堪称当代白素。难道白色的蛇爱好就是比同类特别...

古神在低语

古神在低语

这是人类和古神族之间的战争,追溯到太古,延伸至未来,贯穿历史长河,谱写史诗。古神们带着破碎的世界入侵现实。亘古的隐秘神话揭露真相。升华者在时空的间隙穿梭,往返两界。现实与超凡,刀与剑,血与火。当末日降临,古神从长眠里苏醒。大幕渐起我的父亲曾因调查某位神明的复活而失踪,至今生死未卜。我很慌,但不完全慌。因为那个被复活的神明,就是我。...

奋斗在洪武末年

奋斗在洪武末年

驱逐北元,扫清天下,明太祖固有一死。书生当国,藩王虎视,削藩靖难,血火刀锋中,杀出凛凛新明朝。一个失业的锦衣卫,一个卑微的小人物,左持剑,右握锄,一剑平天下,一锄养万民。这是个小特工,奋斗成为盛世大...

演武令

演武令

宣统二年,精武门创立,广收门徒。杨林无拳无勇,面对列强入侵,清帮横行,他只想,活下去...

每日热搜小说推荐