彭博针对金融业推出大型语言模型BloombergGPT
中新网3月31日电 3月30日,彭博发布公告称,推出为金融界打造的大型语言模型(LLM)——BloombergGPT。
图片来源:彭博网站截图
彭博是一家全球商业、金融信息和新闻资讯提供商。3月30日,该公司发布了一篇关于BloombergGPT开发情况的研究论文,详细介绍了这一大规模生成式人工智能(AI)模型。该大语言模型(LLM)专门针对各类金融数据进行训练,以全方位支持金融领域的自然语言处理(NLP)任务。
据彭博微信公众号消息,该模型将帮助彭博改进现有的金融NLP任务,如市场情绪分析、命名实体识别、新闻分类和问题回答等。此外,BloombergGPT还将释放更多新机遇,调动彭博终端上的海量数据,将人工智能的潜力带到金融领域。
据介绍,彭博的研究人员开创了一种混合训练法,将金融数据与通用数据集结合起来训练模型,以达到在金融基准上取得最佳结果,同时在通用LLM基准上也保持足够的竞争力。
与此同时,彭博的机器学习产品和研究小组和人工智能工程团队合作,利用彭博在数据创建、收集和整理方面的资源,构建了迄今为止规模最大的专业领域数据集之一。
作为一家金融数据公司,彭博的数据分析师在四十多年的时间里收集和维护了运用大量金融用语的文档。开发团队从这个由海量英文金融文档组成的档案库中,提取并创建了一个包含3630亿词例(token)的金融数据集。这批数据又与另一个包含3450亿词例的公共数据集叠加,成为了包含超7000亿词例的大型训练语料库。
彭博的研究团队利用该语料库的一部分内容,训练了纯解码器(decoder-only)因果语言模型,包含500亿个参数。团队还对训练出的模型进行了基准测试。金融领域的NLP任务采用了一套彭博的自有基准,各类通用NLP任务则采用市面上流行的基准。
彭博称,BloombergGPT模型在金融任务上的表现远超类似规模的开放模型,而在一般NLP基准上的表现也达到甚至超过平均水平。
彭博首席技术官肖恩·爱德华兹(Shawn Edwards)还表示,"BloombergGPT将使我们能够处理许多新型的应用,不仅比定制化模型的表现更好,而且开箱即用,能够大大缩短上线时间。"
改革降本两手抓,何小鹏准备打一场翻身战头条创作挑战赛2022年,小鹏汽车交出了一份并不亮眼的财报。3月17日,小鹏汽车公布了2022年四季度及全年财报数据四季度,小鹏累计交付22204辆新车,与去年同期的41751辆相
美国这记重拳挥向中国,美媒对抗中国日益增长的影响力美国国务卿安东尼布林肯主持了新的中国事务协调办公室(又称中国屋ChinaHouse)启动仪式美国政府再次向中国挥出重拳,以对抗中国不断增长的影响力。这次的打击对象是中国的最大移动支
汇齐新材料宾玉成用中国制造打造世界名牌从家乡工厂转战沿海城市,从外企高管到创办新材料公司,宾玉成一直在挑战自己。十年前,选择创办广东汇齐新材料有限公司,对于刚过不惑之年的宾玉成是一件顺理成章的事我不喜欢待在舒适区,当我
大反弹!全国房价结束11连跌,住宅均上涨4。1根据国家统计局3月15日公布的2023年12月份全国房地产开发投资和销售数据,多项数据出现了反弹。全国房地产开发投资13669亿元,同比下降5。7,较去年112月回升4。3个百分点
宁波和硅谷银行有多远?银行还能倒闭?你想象不到的可能,却往往变成真实。在全世界最著名的硅谷,一家名为硅谷的银行突然倒闭。有人这样形象地比喻硅谷银行倒闭过程用别人存在自己手里的钱进行投资,遭遇亏损,又遇到
瞭望青海从地理高地迈向产业高地项目建成后,这里既是光伏电站也是大牧场。公司负责人王超说,大面积光伏板可以减少蒸发量,加上清洗光伏板的水定期浇灌,光伏电站建成后,光伏板下的草就长起来了文瞭望新闻周刊记者陈凯骆晓飞
年产值约27亿元,阳江市再添一海工装备智能制造项目3月17日,阳江滨海新区(阳江高新区)管委会与天顺风能海工装备科技(广东)有限公司签订正式投资协议,标志着总投资约15亿元的天顺重型风电海工装备智能制造项目正式落地该区,将为阳江风
空箱堆港?空箱指标变化不意味我国外贸规模下降央视网消息前段时间有媒体报道称大量集装箱空箱堆积在港口,进而引发对中国外贸状况的担忧。真实的情况究竟如何?在宁波北仑第三集装箱码头,长达3。74公里的码头岸线几乎停满了集装箱货船,
国家统计局原总经济师姚景源今年要稳住出口,把中国内需市场挖掘出来经济观察网记者张锐3月18日,国务院参事室特约研究员国家统计局原总经济师姚景源在第51届中国(广州)国际家具博览会开幕式致辞中表示,过去三年,疫情给中国经济发展带来了前所未有的挑战
交易不是低买高卖实际上它是高买更高卖,强者更强弱者更弱宏观经济1。中共中央办公厅印发关于在全党大兴调查研究的工作方案,聚焦十二大问题,要求各地区各部门结合实际认真贯彻落实。点评主要是通过调研方式给当前最需要解决的关键难题寻找符合现实的
钱找有缘人德不配位,必有灾殃。这句话指的是如果一个人的品行不能够和他(她)现在所处的地位(有可能是权力,也可能是财富)匹配的话,那么这个人迟早会遭殃。现实生活当中,我们常常可以见到这样的现象