淘优惠

淘优惠

“吞金兽”ChatGPT背后:AI算力告急!

热门文章 0

淘宝搜:【天降红包222】领超级红包,京东搜:【天降红包222】
淘宝互助,淘宝双11微信互助群关注公众号 【淘姐妹】

吞金兽是什么东东,吞金兽果然名不虚传,吞金兽是哪个品牌的配饰,啥叫吞金兽
近两个月来,全世界的网友们都在兴致勃勃的“调教”ChatGPT,但第一个受不了的却是ChatGPT的所有者。为了更长远的发展,OpenAI宣布了付费订阅版ChatGPT Plus,每月收费20美元。 虽然OpenAI表示,将持续提供免费版,并且收费项目也将更好的“帮助尽可能多的人使用免费服务”。但是《纽约时报》也指出“在高峰时段,免费版访问人数将受到限制。” 显然,收费会是ChatGPT这类AI服务长久发展的必然选择。 究其根源,在于ChatGPT“越来越聪明”的背后,需要庞大的费用支撑。其中,算力成本是最重要的,也是最不能偷工减料的一部分。 那么,ChatGPT到底需要多少算力来支撑? “吞金兽”ChatGPT的 算力消耗 ChatGPT对算力的消耗可以分为三个主要场景: 一是模型预训练过程,这是ChatGPT消耗算力的最主要场景。 ChatGPT采用预训练语言模型,在Transformer的模型架构下,语言预训练过程可以根据上下文一次处理所有输入,实现大规模并行计算。 通过堆叠多个解码模块,模型的层数规模也会随着提升,可承载的参数量同步增长。与之相对应的,模型训练所需要消耗的算力也就越大。 据OpenAI团队发表于2020年的论文《Language Models are Few-Shot Learners》,训练一次1746亿参数的GPT-3模型需要的算力约为3640 PFlop/s-day。 即假如每秒计算一千万亿次,也需要计算3640天。 考虑到ChatGPT训练所用的模型是基于GPT-3.5模型微调而来,GPT-3.5模型增加了参数量和训练样本量,包含超过1746亿个参数,那么预估训练一次ChatGPT所需算力至少需要约3640 PFlop/s-day的算力。 东吴证券研报分析认为,ChatGPT的优化主要来自模型的增大,以及因此带来的算力增加。 GPT、GPT-2和GPT-3的参数量从1.17亿增加到1750亿,预训练数据量从5GB增加到45TB,其中GPT-3训练单次的成本就高达460万美元。 同时,模型开发过程很难一次取得成功,整个开发阶段可能需要进行多次预训练过程,因此对于算力的需求是持续的。 此外,从基础大模型向特定场景迁移的过程,如基于ChatGPT构建医疗AI大模型,需要使用特定领域数据进行模型二次训练,同样会增加训练算力需求。 二是模型迭代过程。 从模型迭代的角度来看,ChatGPT模型并不是静态的,而是需要不断进行模型调优,以确保模型处于最佳应用状态。 这一过程中,一方面是需要开发者对模型参数进行调整,确保输出内容不是有害和失真的;另一方面,需要基于用户反馈和PPO策略,对模型进行大规模或小规模的迭代训练。 因此,模型调优同样会为ChatGPT带来算力成本,具体算力需求和成本金额取决于模型的迭代速度。 三是日常运营过程。 在日常运营过程中,用户交互带来的数据处理需求同样也是一笔不小的算力开支。考虑到ChatGPT面向全球大众用户,用的人越多,带宽消耗越大,服务器成本只会更高。 据SimilarWeb数据,2023年1月ChatGPT官网总访问量为6.16亿次。 据Fortune杂志,每次用户与ChatGPT互动,产生的算力云服务成本约0.01美元。 基于此,ChatGPT单月运营对应成本约616万美元。 据上文,我们已知训练一次1746亿参数的GPT-3模型需要3640 PFlop/s-day的算力及460万美元的成本,假设单位算力成本固定,测算ChatGPT单月运营所需算力约4874.4PFlop/s-day。 直观对比,如果使用总投资30.2亿、算力500P的数据中心来支撑ChatGPT的运行,至少需要7-8个这样的数据中心,基础设施的投入都是以百亿记的。 当然,基础设施可以通过租用的方式来解决,但算力需求带来的本压力依然巨大。 随着国内外厂商相继入局研发类似大模型,将进一步加大对算力的需求。 AI算力霸权时代的到来 模型算力需求增速超越芯片性能增速,算力霸权时代或将到来。 据OpenAI测算,自2012年以来,全球头部AI模型训练算力需求3-4个月翻一番,每年头部训练模型所需算力增长幅度高达10倍。 而摩尔定律认为,芯片计算性能大约每18-24个月翻一番。 数据显示,从2012年到2018年,训练AI所耗费的算力增长了30万倍,而摩尔定律在相同时间只有7倍的增长。 因此,AI训练模型算力需求增长与芯片计算性能增长之间的不匹配,或将带来对算力基础设施供给需求的快速增长。 考虑到算力对于AI模型训练效果的关键性作用,拥有更丰富算力资源的模型开发者,或将能够训练出更优秀的AI模型。 所以现在有一种说法:AI进入了新的算力霸权时代,大家要用千倍、万倍的算力才能训练出世界上最好的算法。 那么无论是谁参与进来,都需要回答一个问题:算力成本怎么解决? 在中国,这个答案就藏在国家如火如荼推进的“东数西算”工程里。 数据显示,我国算力产业规模快速增长,近五年平均增速超过30%,算力规模排名全球第二。 但在发展的过程中仍面临人均算力尚低、算力随需处理的需求难以满足、算力应用广度和深度不够等问题。 因此,国家“东数西算”工程通过构建全国一体化的新型算力网络,优化数据中心建设布局,将东部算力需求有序引导到西部,利用西部的资源优势,为数字中国的发展提供低碳、低成本的优质算力。 对于AI产业来说,“东数西算”也可以成为“东数西训”,即庞大的训练算力需求完全可以转移到算力成本更低,同时规模更具优势的西部数据中心中进行。 对应的,这些承载智能训练的数据中心本身,也将为更好的适应智能训练需求进行针对性改造,比如在能源供给、散热结构、机柜形态等方面更适合使用了大量智能训练芯片的服务器等。 这也为数据中心未来发展提出了新的思路。 数据中心建设将告别千篇一律的通用时代,进入以场景为指引、以应用为导向的“专用”时代,“东数西训”、“东数西渲”、“东数西存”等应用将成为主流方向。 目前,我国算力产业仍在高速增长。 据IDC与浪潮信息联合发布的《2022-2023中国人工智能计算力发展评估报告》显示,相较于2020年我国135EFLOPS的算力总规模,2022年我国智能算力规模近乎翻倍,达到268EFLOPS,超过通用算力规模;预计未来5年我国智能算力规模的年复合增长率将达52.3%。 未来,我国还应在算力方面进一步加强超算中心、智算中心和边缘数据中心建设,不断满足政府、行业、企业甚至个人等多样化的智能场景需要,以算力赋能智慧城市、智慧医疗、智慧农业等千行百业的高质量发展。 不仅如此,大力加强自主可控高端芯片生产能力,争取在量子芯片领域实现换道超车,加强算力人才培养,同样是保持我国AI算力领先的重要手段。

“读书是为了找外国人杂交”,陈教授的魔幻言论,ChatGPT怎么看

读书是为了找好工作吗,读书是为了出人头地吗,读书是不是为了文凭和发财,读书是为了找工作的观点
2月18日下午,发生在合肥庐江中学大礼堂的一幕真的太魔幻了。先是学校斥巨资特意邀请的陈宏友教授(被爆其一场讲座出场费2万)给在场几百名师生说的“贴心话”:“不要谈什么理想抱负。钱是最重要的,读书就是为了钱。”“成绩好的人以后可以找外国人配对,杂交出更好的精英。”“如果你考了安徽的好大学,就可以随便挑安徽的男人和女人。如果你考了北京的好大学,以后就可以挑全中国的男人和女人。如果你考了美国的好大学,那全世界的男人女人随便挑……”当着众多师生们的面儿,陈教授堂而皇之说出的种种出格、不入流的言论,让所有人都惊掉了下巴。之后台下一名高中生坐不住了,上台把教授的话筒抢走,随即振臂高呼:“我们学习是为了什么?为了中华民族的伟大复兴!同学们,努力学习!为了中国崛起!”台下,无数学生报之以热烈的掌声。事发视频和言论被放到网上之后引起了轩然大波,也引发了网友们的热烈讨论。大部分人都对这个孩子表示支持:当然,也有人对教授的言论表示理解,认为他只是说出了社会真相而已:那,我们到底该如何看待该教授的一系列言论呢?最近ChatGPT这么火,常爸也试着把这个难题抛给了它,把教授的言论原封不动照搬过去,答案相当出人意料。问题一:如何评判下面这句话:不要谈什么理想抱负,钱是最重要的,读书就是为了钱。ChatGPT回答文字版:这句话的价值观是十分狭隘和片面的,它忽略了人们在生活中追求的其他重要方面。虽然钱在现实生活中是很重要的,但是将读书仅仅看作是为了赚钱的工具是一种狭隘的看法。读书不仅可以帮助人们获得知识、技能和经验,还可以让人们更好地理解自己和世界,开拓人们的视野,促进人类社会的发展和进步。因此,从更广阔和长远的角度来看,这句话是不可取的。当然,每个人的价值观和追求都有所不同,但是将金钱视为唯一的追求是不健康和不可持续的。问题二:如何评判下面这句话:你们中成绩最好的人,以后可以找外国人配对。和外国人配对,可以帮我们改善基因,杂交出更好的精英。ChatGPT回答文字版:这句话涉及到了基因、人种和种族歧视等话题,充满了偏见和错误的观点。首先,将成绩作为选择配偶的唯一标准是不恰当的。人们应该根据彼此的个性、兴趣、价值观和相处的默契来选择配偶,而不是仅仅看重对方的成绩。其次,将与外国人配对视为改善基因和杂交出更好的精英也是一种种族主义和科学上的错误观点。基因是复杂的,无法简单地将其视为某个种族的属性。而且,将杂交视为更好的可能性也是错误的,因为不同的种族之间并不存在绝对的“优劣”,每个人都有自己的优点和不足。最后,人们的配偶选择应该建立在互相尊重和平等的基础上,而不是基于种族主义和歧视的想法。将种族和基因因素用于配偶选择不仅是不正确的,而且是道德上不可接受的。问题三:如何评判下面这句话:我儿子就在美国念书,现在就找了个美国女朋友。以后他可以娶到一个白人老婆,改善基因。ChatGPT回答文字版:这句话表达的观点存在很大的问题,涉及到了基因、种族歧视和人际关系等多个方面。首先,将儿子的配偶选择仅仅建立在改善基因的想法上是不正确的,因为基因是非常复杂的,无法简单地将其视为某个种族的属性。而且,将杂交视为更好的可能性也是错误的,因为不同的种族之间并不存在绝对的“优劣”,每个人都有自己的优点和不足。其次,将儿子的配偶选择仅仅看重对方的种族身份是一种种族主义和歧视。人们应该尊重不同种族和文化的人们,而不是将某个种族或地区视为优越或劣等。最后,将儿子的成功与他找到的白人女友联系起来,忽略了个体的个性、兴趣、价值观等多种因素。人们应该根据彼此的个性、兴趣、价值观和相处的默契来选择配偶,而不是仅仅看重对方的种族身份。因此,这句话表达的观点是不正确的,我们应该尊重不同的种族和文化,不将种族身份作为选择配偶的唯一标准,并考虑更多的因素来选择自己的配偶。问题四:如何评判下面这句话:如果你考了安徽的好大学,就可以随便挑安徽的男人和女人。如果你考了北京的好大学,以后就可以挑全中国的男人和女人。如果你考了美国的好大学,那全世界的男人女人随便你挑。ChatGPT回答文字版:这句话表达的是一种不健康和错误的观点,它将人们的价值仅仅看作是学历和地域背景,忽略了个体的个性、兴趣、价值观以及人际关系等多种因素。首先,将学历作为选择配偶的唯一标准是不正确的。人们应该根据彼此的兴趣、价值观、相处默契等因素来选择配偶,而不是仅仅看重学历背景。其次,将地域作为选择配偶的依据也是错误的。无论是选择同地区的还是异地区的配偶,人们应该尊重彼此的选择,而不是仅仅因为某个地方的人对自己更有利就去选择他们。最后,将美国的好大学视为挑选全世界男女的标准,是一种错误的价值观和偏见。人们应该尊重不同地域、不同文化和不同背景的人们,而不是把自己所处的地区或文化视为优越,或是去追求一种幻想中的所谓“全球最优秀”的配偶。因此,这句话表达的价值观是片面和不正确的,人们应该更多地考虑个性和个人的生活价值,而不是仅仅看重某些表面的标准。嘿,看完ChatGPT的回答后,是不是感觉,这个风头正劲的AI机器人,三观可比前面那个教授正多了!那这教授又是何许人也?他是合肥师范学院教师教育学院副教授,他是安徽省中小学教师培训专家库特聘专家,他是安徽省高等院校首届“省级教坛新秀”,他是北京师范大学第十批荣誉校友,他是合肥师范学院首届“最受学生欢迎的十佳教师”,他是学校特意请来做“感恩励志”演讲的老师。师者,所以传道受业解惑者也,是人类灵魂工程师,不是成功学的骗子。努力学习是为了过上更好的生活,但绝不是唯一的目的。所以我们让孩子读书、接受教育到底为了什么?刚刚已经验证了,ChatGPT真的很厉害,那这个问题也一并抛给它吧。问题五:孩子为什么要接受教育?ChatGPT回答文字版:孩子接受教育的目的在于培养其全面发展的个性和能力,让他们具备成为独立、有价值和富有创造力的成年人所需的各种素质。以下是几个孩子接受教育的重要目的:1、获取知识和技能:接受教育可以帮助孩子学习各种知识和技能,包括语言、科学、社会、历史、文化、数学、艺术等,有助于孩子更好地了解世界和自我,提升自己在各个方面的能力。2、培养社交能力:教育不仅教授知识和技能,还可以帮助孩子建立良好的人际关系、了解他人、尊重他人和互相合作,从而在成长过程中更好地融入社会。3、培养价值观和品德:教育可以帮助孩子树立正确的价值观和道德观念,从而在日后的生活中能够根据自己的价值观和道德标准来判断和决策。4、激发创造力和创新能力:教育可以激发孩子的创造力和创新能力,让他们思维开阔、善于探究和创新,为未来的职业和生活奠定基础。总之,教育是培养孩子成为独立、有价值和富有创造力的成年人所需的关键环节,让孩子具备各种必要的能力和素质,更好地融入社会,实现自我价值。看完上面ChatGPT的自动回复,不知大家有什么感想?当人工智能已经进化到这个程度的时候,“陈教授”们的思想还停留在“读好书,去美国,全世界男人女人随便挑来杂交改善基因”的境界。真的是令人扼腕叹息!人类是地球上唯一一个拥有“理想”这种奢侈品的物种,当其他动物只能按照基因规划的线路过完一生时,我们却可以思考要如何活下去,要活成什么样。我们好不容易摆脱了活着仅仅是为了“生存”和“繁殖”这两项本能的生活,怎么教孩子越活越回去了呢?书中未必有黄金屋,但读书,一定可以使人拥有打破人生边界的底气,积累不断超越自己的资本。只要一个人能坚持提升自己,那些读过的书,那些走过的路,终将改变他的生活,让他随时随地拥有温暖和能量,更拥有继续前行的力量。“穷则独善其身,达则兼济天下。”老祖宗这条教训不能忘!与君共勉。你是如何看待这场风波的呢?如果是你,会如何跟孩子讲述这次冲突?欢迎在评论区和大家分享!

森林之子为什么在steam上搜不到 森林之子登录steam时间

森林之子可以玩了吗,森林之子到底出不出了,森林之子游戏没消息了2020,森林之子cg
《森林之子》是一款多人开放世界生存游戏,游戏将于2023年2月24上线Steam,玩家们可以邀约好友一起联机,进行房屋建造、武器制作、食物采集等玩法,在孤岛中努力生存,很多玩家可能在Steam上搜不到这款游戏,那么今天本文为大家带来森林之子下载方法。首先我们要进入Steam社区,搜索Sons Of The Forest,然后点击游戏名进入商店页面。目前游戏还未上线,等到2月24日游戏更新后,玩家们可以再次进入Steam商店里搜索游戏名,点击添加至购物车,选择为自己购买,然后即可下载游戏啦~在这款多人开放世界生存游戏里,玩家们除了可以和好友一起建造庇护所、采集食物,还需要挑战各种岛屿上的怪兽,考验大家和好友的分工合作能力与孤岛生存技巧,非常适合喜欢生存类联机游戏的玩家们哦~不过想要和朋友一起顺畅联机的玩家,一款好的加速器帮助是必不可少的,这里为大家推荐泡芙加速器,能有效帮助大家解决游戏联机网络卡顿、游戏掉线等问题,为大家带来丝滑般顺畅的愉快联机时光~~为了让玩家们更顺畅地进行多人联机游戏,3dm加速器为大家准备了官方2天福利时长,在3dm加速器客户端右方找到【卡券包】→【时长卡】,输入“3DM888”即可领取哦~以上是《森林之子Steam叫什么名字?森林之子下载教程》详细内容,想获取更多游戏资讯,欢迎关注我们~