【盘中宝】训练大模型的数据或在2026年耗尽!这一资源将成为AI发展的“胜负手”,这家公司拥有海量正版数据资源,原创驻站作者440余万名
盘中宝
2023.08.28 14:43 星期一

财联社资讯获悉,数据资源正成为了稀缺的资源,最新一波为“生成式人工智能”提供动力的超大模型依赖于海量的数据。

此前,模型构建者多数时候从互联网抓取数据(通常是未经许可的)。现在,他们正在寻找新的数据来源来维持这种疯狂的训练模式。与此同时,拥有大量新式数据的公司正在权衡如何最好地从中获利。一场数据争夺战正在拉开序幕。

一、可用于训练的高质量文本可能会在2026年耗尽

人工智能模型的两个基本要素就是数据集和处理能力,系统在数据集上接受训练,模型通过处理能力检测这些数据集内外部之间的关系。在某种程度上,这两大基本要素可以相互替代:一个模型可以通过吸收更多数据或增加更多处理能力加以改进。然而,在专业人工智能芯片短缺的情况下,后者正变得越来越困难,这导致模型构建者加倍专注于寻找数据。

研究机构Epoch AI认为,对数据的需求将会急剧增加,以至于可用于训练的高质量文本可能会在2026年耗尽。据悉,谷歌和Meta这两家科技巨头的最新人工智能模型已经接受了超过1万亿个单词的训练。相比之下,在线百科全书Wikipedia上的英语单词总数约为40亿个。

值得关注的是,近期国内外巨头纷纷披露AI大模型,AI领域3大核心是数据、算力、算法,其中数据将成为AI大模型的核心竞争力,光大证券指出,高质量的数据资源可让数据变成资产、变成核心生产力,AI模型的生产内容高度依赖源头数据。

东北证券分析称,在本轮AI浪潮下,叠加数据要素市场的快速变革,本身是数据源、或接近数据源的公司能够更好地使用AI创造出更大价值,成为AI新时代真正的受益者。

二、语料库须长期自我积累沉淀,未来数据将成为AI发展的胜负手

由于人类的自然语义数据是有限的,GPT3训练量是40t语义训练量,GPT4外界有人推测超过了400t的数据量,再往后模型参数越来越大,所需要的数据量也越来越大。人类现有知识马上就用完了,GPT5可能是NLP这个模态最近几年的一个天花板。

东吴证券则指出,对于我国而言,算法和算力都可以通过挖掘优质人才、引进优秀工程实践,或者直接购买海外优质资产追赶。而培养中文环境的优质数据集、语料库却必须长期自我积累沉淀,未来数据将成为AI发展的胜负手,并有望为中国训练自己的大模型,走出差异化道路提供重要基础。

三、相关上市公司:中文在线、中信出版、汤姆猫

中文在线拥有海量的正版中文数据资源,公司在数据的优势有三个,第一个是海量,公司拥有的中文文字字数超万亿字。第二个是正版版权,拥有旗下数字内容从数字版权到全部版权的权利,可为AI模型公司提供拥有版权的数据集用于训练。第三个是完整的各类型商业生态链,公司拥有网络原创驻站作者440余万名。

中信出版是是全国优秀出版机构,拥有图书、报刊、电子、音像和网络出版及批发零售全牌照,主营图书出版与发行、数字阅读与服务业务和书店业务。

汤姆猫已将汤姆猫IP植入连接了ChatGPT的API,进行语音智能互动功能测试,初步验证了相关技术实现的可行性,已正式着手应用产品的开发。公司海外收入占比近八成,公司系列休闲应用全球平均月活超4亿人次,累计下载量已超180亿人次。

盘中有「宝」,快人一步!
1888 起
立即购买
展开
最新文章
加载更多
盘中宝
收藏
|
39.65W
|
VIP试读
随着这类产品逐步走出实验室,进入多样化应用场景,市场对其需求日益凸显,新兴资本加速入场。这家公司拥有多种相关领域核心部件产品。
相关股票:
栏目:盘中宝12月08日 13:12
火山引擎FORCE原动力大会本月召开,机构称字节已形成模型、平台、应用、硬件全AI产业链布局,这家企业与火山引擎持续合作,拥有AI玩具细分领域方案,未来将推出更多细分产品解决方案。
相关股票:
栏目:盘中宝12月01日 14:12
订单量增超4.5倍,机构称秋冬流感季通常会带动相关药物产品需求增长,这家企业拥有多个类别产品,另一企业已形成一体化产业链布局。
相关股票:
栏目:盘中宝11月24日 14:11
产业拐点已现,新技术即将进入关键验证阶段,机构称近期该板块有望迎来密集催化,未来行业市场规模或逼近10万亿,这家企业是相关领域供应商,研制多个关键设备,另一企业深度参与行业试验验证。
相关股票:
栏目:盘中宝11月14日 09:11
①锂电池产业链人气回暖,栏目持续跟踪梳理该主线细分方向!这些公司收获较高涨幅; ②AI用电荒催化电力设备板块,机构称行业有望持续景气!王牌栏目点评优质公司。
栏目:盘中宝11月09日 12:11
政策支持+技术成熟+成本下降推动行业爆发,这类产品有望变革出行方式,潜在市场星辰大海。这家公司在该领域已与多家厂商达成合作。
相关股票:
栏目:盘中宝11月03日 14:11
①记者一线资讯获关注!Ta在手订单超10亿元创历史新高,栏目火速梳理发文; ②月末大涨!量子计算处于规模化应用前夜,栏目持续覆盖相关公司,Ta发布后最高涨超80%; ③10月锂电材料价格持续上涨!栏目月内持续跟踪涨价进展,点评多个细分方向。
栏目:盘中宝11月02日 16:11
AI算力需求激增推动行业发展,机构称该细分领域重要性及价值量有望持续提升,这家企业推出多款新产品,积极开拓海外北美客户,另一企业已成立相关事业部。
相关股票:
栏目:盘中宝10月28日 09:10
科技巨头拟建小型模块化核反应堆为旗下AI供能,业内人士称核能或成支撑AI变革重要能源来源,这家企业产品实现突破,可用于相关领域,另一企业积极布局前沿领域。
相关股票:
栏目:盘中宝10月20日 09:10
该行业接连签下多笔重大订单,机构称“反内卷进程持续推进+海外市场需求保持增长+新技术逐步应用”下相关需求有望逐渐企稳复苏,这家企业最新产品可有效降低生产成本,另一企业上半年细分业务收入同比增近40%。
相关股票:
栏目:盘中宝10月13日 14:10