范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

大模型热到芯片暴涨,阿里百度成了英伟达的打工仔

  GPU不够用了。
  文  《中国企业家》记者 闫俊文
  编辑  李薇
  图片来源  视觉中国
  中国科技公司和创业者竞相追逐大模型, 引发GPU芯片需求量的暴增,以及价格的疯狂上涨。
  GPU是ChatGPT训练和部署的关键部件,这是强大算力的基础设施。根据公开消息,微软的Azure云服务为ChatGPT构建了超过1万枚英伟达A100 GPU芯片的AI计算集群。
  千芯科技董事长陈巍告诉《中国企业家》,以A100芯片为例, 从去年年底到现在,其单价涨了超过50%, 从之前约5万元涨到了近10万元。由于A100已经被美国禁止售往中国内地,国内同行预估仅有3万枚存量。英伟达推出的A100替代版A800,国内厂商也是排队拿货,并且常常无货。
  国内某大型服务器厂商的员工王石也感受到了这股浪潮。他告诉《中国企业家》,近期供应的压力比较大,包括英伟达等供应商的压力也比较大,但这并不代表错过了这一波就没有机会了,"相信今年年内供需回归到相对理性的水平"。
  "我要给大家降温。这是一个突发的需求,大家不要着急,不是说我错过了这两个月或者三个月,我就失败了,远远没有到那个时候。"王石强调。
  据《中国企业家》统计,除了阿里巴巴、百度等互联网巨头之外,商汤科技、昆仑万维、毫末智行、360等公司也官宣了自己的大模型,如果再加上王小川、王慧文、李开复等创业者, 中国年内推出的大模型数量已经超过了10个。
  一些行业人士预测,国内需要有8至20个大模型,比如生物医药计算、材料计算、化学计算、自动驾驶、气象等大模型,甚至未来四五十个也说不定。
  算力、算法和数据构成了AI时代的三要素,而算力又是电力般的基础设施,有多少枚GPU,有多少算力,成为外界评估大模型研发和创业成败的关键。
  在这一轮由ChatGPT掀起的大模型创业潮里,黄仁勋和英伟达成为了大赢家。
  据统计,2020年, 全世界跑AI的云计算与数据中心,80.6%都在用英伟达的GPU驱动。 截至发稿,英伟达股价为270美元,比2022年9月时的低点119美元翻了一番,总市值为6669亿美元,成为美国第五大上市公司,比德州仪器、超威半导体(AMD)、高通、英特尔等芯片企业市值相加还要多。
  五分之二的预算买算力
  英伟达已经供不上货了。
  近期, 马斯克为推进推特内部的新AIGC项目,购买了大约1万枚GPU。 从2022年末,微软就实行了GPU资源配额供给,但今年1月以来审批时间越来越长,如今部分申请需要等待几天甚至几周才能获批。同时,微软向英伟达预订的数万枚GPU芯片,交货无期。
  2月份,出门问问CEO李志飞和美团联合创始人王慧文,讨论了大模型创业要花多少钱、入门门槛什么样。李志飞认为, 门槛至少需要5000万美元,其中的2000万美元就是用来购买算力的。 王慧文和李志飞不久前相继宣布在大模型领域创业。
  根据陈巍测算,国内如果想要直接训练出一个ChatGPT3级别的大模型,常规最少需要1000枚A100级别的GPU芯片,而如果想要实际部署,不考虑冗余和响应速度,对于搜索引擎级别的服务,至少需要6000枚A100级别的GPU芯片。 仅仅芯片一项,最小投入就到了近10亿元人民币。
  一份流传的《阿里AI专家交流纪要》显示,百度年初紧急下单3000台8张芯片的A800服务器,这意味着需要2.4万枚A800,而 预计全年百度会有A800和H800共5万枚的需求。阿里云预计在今年需要1万枚左右,其中6000枚是H800。 此外,阿里云也会用到平头哥这种自研的芯片,每年采购大概3000枚。
  2022年9月,英伟达发布H100型号GPU,但被美国禁止出口至中国,但英伟达怎会忍心错过中国的大模型热,为了出口,英伟达牺牲了部分性能,在今年推出了H800版本。
  对照百度发布的文心一言,陈巍测算,按照国内成本估算单次应答成本5分钱,如果日访问量10亿人次,以月租价格评估,每天云计算成本约5000万元人民币,一个月将增加成本15亿元,一年增加成本180亿元,远远高于训练成本。此前媒体估算,ChatGPT光3月份的电费就得交近200万美元,这差不多跟27.5万中国居民一个月用电量相当。
  《中国企业家》了解到,对于不缺钱的巨头来说,A100存储量也不多,未来采购以A800和H800为主,但仍需要V100等老式芯片补充。V100性价比高一些,在云上跑的成本是A100的三分之二左右,但运行速度较慢,如果是ChatGPT4级别大模型就不够用了。
  也就是说,要想大模型算得更快、更准,必须适配最先进的GPU芯片。虽然拿不到最先进的GPU,但大模型玩家依然在积极囤货。按照上述数字估算, 国内对A800以及H800的需求已经到了数十万级别。
  王石说,目前来看,对于算力的需求可以说是上不封顶,有多少算力,都希望能够投身进来,"只能这么说,越多越好"。
  仅仅靠资本似乎已经玩不转了,大模型之战,最后结局可能还是巨头之间的游戏。
  一位头部投资机构的负责人告诉《中国企业家》:"创投界这点资本是不值一提的,资本它对整个行业的格局不造成影响,本来就这点钱也投不起,中国这几个VC加上PE,今年不在ChatGPT上投下10亿、20亿美元,水漂都打不起来,做不了几个训练级,但是百度和华为如果愿意在上面努力去做的话,我觉得投得起。"
  瘸腿奔跑的中国大模型
  不管是阿里巴巴、腾讯、百度等巨头,还是王慧文、王小川等创业者,他们不得不戴着枷锁跳舞:一方面,迫于美国的芯片禁令,他们得不到最先进的芯片源源不断的支持;另一方面,他们还要追赶国外已经到了ChatGPT4水准的技术。
  陈巍感慨中国AI企业的不易。如果得不到国外先进的芯片,中国企业只能使用比较老旧或者工艺成熟但不那么先进的芯片,综合性能可能只有A100的60%,数量需要更多,跑得却更慢, 综合成本要高出20%至30%,对于企业来说,这很有可能是赚钱和不赚钱的分水岭,活下去和活不下去的分水岭。
  处处受限,起步又晚,但大模型也得干下去。
  王小川在接受媒体采访时说,晚了也得干。美国人之前把核弹造出来,中国就不造了吗?这跟创业公司本身没关系,是中国要不要做的问题。
  王石认为, 中国企业没必要"芯片焦虑"。 他提到了前几年"挖币"造成的硬盘泡沫,结果造成了SSD(硬盘)的一地鸡毛,整个硬盘厂商在2022年整年可能都在消耗库存。
  GPU只是大模型创业链条中的一环,机房环境、算法、人才等等也必须配套跟上。
  IT设备特别是计算设备的迭代和更新太快,如果在没有准备好的时候,放在库房里没有用,放一年,价值就浪费了。"现在都在用A800,今年下半年就有H800,性能提升很快,这个时候抢到了A800,但如果还没有用起来,是没有价值的,永远会有新产品出来。"王石表示。
  王石还补充说,现阶段,算力的供应无论如何是不够的。这有两个策略,一个是把后台的产能跟上,另一个则是优化效率,通过算法等技术手段提升可用算力的效率。
  英伟达成最大赢家
  阿里和腾讯近期在算力市场都有重大动作。
  阿里云在4月11日峰会上说,阿里云进行有史以来最大幅度的一次降价,通用计算将大幅降低,对比上一代主售产品最高可下降40%,还发布了"飞天免费试用计划",开放计算存储、数据库、机器学习等核心产品免费试用。
  腾讯则发布了新一代高性能计算集群HCC,采用了国内首发的英伟达H800 GPU。有数据称,腾讯云新一代集群的算力性能较前代提升高达3倍,是国内性能最强的大模型计算集群。
  但 不管哪家,他们都摆脱不了一个名叫英伟达的厂商, 其创始人黄仁勋,江湖人称"黄教主",他多次为此次ChatGPT浪潮鼓风。
  "我们正处于AI的iPhone时刻。"黄仁勋在3月2023年GTC大会上说,"初创公司正在竞相打造颠覆性产品和商业模式,科技巨头也在寻求突破。"
  在此次大会上,黄仁勋发布了ChatGPT专用芯片H100,而且他宣布,将会把由八块旗舰版A100或H100芯片集成的超级AI计算系统通过租赁的方式开放给企业。每月租金为37000美元,以加速推动这轮大语言模型引领的AI繁荣。
  外媒一份数据显示, 英伟达占据了95%图形处理器的市场份额。 IDC数据显示,国内GPU服务器在2021年占国内服务器市场规模的比例超过88.4%,英伟达的产品占比超80%。
  联想集团CTO芮勇说,目前来看,还是英伟达的天下,但未来不确定,因为大家对算力的需求只会越来越大。
  行业人士说,未来GPU和算力的需求一定是多元的,或者说异构的。到了现在算力需求大爆发的时候,带来的第一个变化就是在这个领域多元化的蓬勃发展。
  水大鱼大,但虾米和浮游生物等也会有存活机会。多元带来了更多的机会,但是最后谁能胜出,就看谁的战略定力,能持续地投入。

纽约时报曝暴雪与网易分手内幕,暴雪CEO考迪克这下真出名了!前段时间就暴雪和网易的情况玩咖宝典进行了一些曝料,结果没想到才刚过两天新的消息又来了。而且这次的消息还是由纽约时报进行的曝料,之前那些说什么消息都拿出来说的读者这下没什么好说的了吧华为Mate60X6000mAh大电池XMAGE影像7。2英寸直屏,强出新高度近年来华为凭借出色的创新能力,带来了不少相当惊艳的产品,从华为P50,mate50再到近期发布的华为P60系列,可以说是满足了不少花粉的期待。最近关于华为Mate60X的信息不断曝红米热门机型综合点评K50至尊版性价比仍最高,Note12T后来居上在当下的手机市场中,红米Redmi和真我Realme(俩名字真像)是唯一能够坚持走性价比路线的品牌,其他很多原本主打性价比的品牌只是将性价比作为进入手机市场的敲门砖。在这些品牌慢慢天玑9000对比骁龙7Gen2,权威数据出炉,卢伟冰被逼急了?自从一加Ace2V和RedmiNote12Turbo发布后,就有不少网友聚焦天玑9000和骁龙7Gen2,想要分出个一二来。支持天玑9000的用户,就给骁龙7Gen2扣上了阉割骁龙OPPOFindX7手机被曝光,搭载天玑9300芯片,配5400毫安时大电池说实话,OPPO的Find系列机型,从整体上而言的话,确实是挺不错的。这一点,使用过的人,我想都应该深有体会吧?最近,网上曝光出了关于OPPOFindX7手机的渲染图及部分参数。从一代神机小米11Ultra,在2023年体验如何?还值得入手吗?2023年了,有朋友问我想买个备用机,预算两千出头,小米11Ultra还值得入手吗?首先,这位朋友确实会挑手机,小米11Ultra的配置依旧可以秒杀现在的很多中端机,目前价格也是两为什么美团给我寄了抽纸盒不显示?收到美团寄的抽纸盒怎么处理在大数据时代,各种层出不穷的骗局出现在我们的生活中,像文中小编讲到的突然收到美团的赠品便是很多人都有的经历,于是为什么美团给我寄了抽纸盒不显示成了大家在问的,下面小编就和大家一起看IPO观察第三次冲击港交所IPO,途虎养车为什么急于上市?3月30日,途虎养车在港交所更新了IPO招股书。红星资本局发现,这是途虎养车第三次申请上市。2022年1月,途虎养车向港交所递交招股书,因6个月内未通过聆讯,同年7月IPO申请失效去美元化开始!枪在手,跟我走最近,去美元化劲头愈演愈烈,先是包括中国在内的法国沙特以色列等多国抛售大量美债,中海油与法国道达尔能源通过上海石油天然气交易中心平台完成首单LNG跨境人民币结算交易。之后沙特内阁批喉咙发炎不舒服,我却不愿意去买药1hr俗话说得好,不听老人言,吃亏在眼前。家里人觉得我身体哪里不舒服,就要找医生去看,不能光靠吃家里面堆积的药,那是不全面的。我却觉得身体哪里不舒服,完全可以利用家里面的药,然后对冠军争夺战一触即发!威尔逊再遇克星墨菲,90后第一人恐无缘复仇北京时间2023年4月2日,世界斯诺克巡回锦标赛半决赛已经宣告全部结束。90后第一人凯伦威尔逊凭借105的表现击败中国一哥,而墨菲则在13落后的情况下以109绝杀塞尔比第三次挺进本
蒸米饭有窍门这样做更香甜来源今晚报今晚报讯(记者李岩)蒸米饭看上去很简单,但是想要蒸出口感香甜的米饭其实还有不少讲究。厨师姜宗伟提示,蒸米饭时注意以下几点,蒸出来的米饭口感会更好。适度淘米不少人在淘米时一霸占弟弟遗产收性感女徒弟代言假货,75岁侯耀华又出幺蛾子文大牌娱姐喜爱相声的朋友应该都知道,我国如今的相声界的大部分演员,都是师从三大家族。他们分别是马家,侯家和常家,代表人物马三立侯宝林常宝堃。正是因为有了这三大家族的存在,我国的相声霸占弟弟遗产收性感女徒弟代言假货,75岁侯耀华又出幺蛾子文大牌娱姐喜爱相声的朋友应该都知道,我国如今的相声界的大部分演员,都是师从三大家族。他们分别是马家,侯家和常家,代表人物马三立侯宝林常宝堃。正是因为有了这三大家族的存在,我国的相声西甲毕尔巴鄂vs阿梅里亚升班马客队状态低迷,主队似乎有机会003毕尔巴鄂竞技VS阿尔梅里亚西甲202210010300表面解读九月初主场不敌爱斯宾奴遭遇西甲开局首败,令华维迪和一众将士极度不满,在随后的战役中,球队提升专注力,踢出了令人叹西甲毕尔巴鄂vs阿梅里亚升班马客队状态低迷,主队似乎有机会003毕尔巴鄂竞技VS阿尔梅里亚西甲202210010300表面解读九月初主场不敌爱斯宾奴遭遇西甲开局首败,令华维迪和一众将士极度不满,在随后的战役中,球队提升专注力,踢出了令人叹古诗词里傲雪欺霜的男宝宝佳名,每一个都独特洋气这世界上的父母都会希望自己的孩子能够成为人群中最耀眼的孩子,那么人们在对一个人最直接最开始的印象便是名字,一个人的名字如果与众不同,就能够在第一时间抓住人的眼球,让人记住。因此现在古诗词里傲雪欺霜的男宝宝佳名,每一个都独特洋气这世界上的父母都会希望自己的孩子能够成为人群中最耀眼的孩子,那么人们在对一个人最直接最开始的印象便是名字,一个人的名字如果与众不同,就能够在第一时间抓住人的眼球,让人记住。因此现在世乒赛连续六场30!韩国首战告捷,德国大获全胜,国乒继续休息2022年9月30日,世乒赛继续进行,六场小组赛结束,全是30胜出,男团德国队韩国队法国队埃及队,女团中国台北队新加坡队取得开门红,国乒继续休息,明天出场比赛。男团第4组,韩国30张本智和险被爆冷!连扳3局逆转伊朗选手,日本队世乒赛首战告捷北京时间9月30日下午,成都团体世乒赛继续进行,由张本智和领衔的日本男乒也迎来了自己的首秀,与伊朗男队展开较量。本次比赛日本男队并非满员参加,东京奥运主力丹羽孝希因为突然确诊流感而世乒赛连续六场30!韩国首战告捷,德国大获全胜,国乒继续休息2022年9月30日,世乒赛继续进行,六场小组赛结束,全是30胜出,男团德国队韩国队法国队埃及队,女团中国台北队新加坡队取得开门红,国乒继续休息,明天出场比赛。男团第4组,韩国30张本智和险被爆冷!连扳3局逆转伊朗选手,日本队世乒赛首战告捷北京时间9月30日下午,成都团体世乒赛继续进行,由张本智和领衔的日本男乒也迎来了自己的首秀,与伊朗男队展开较量。本次比赛日本男队并非满员参加,东京奥运主力丹羽孝希因为突然确诊流感而