近年来,训练前沿人工智能模型的成本急剧增长,但关于这些费用的规模和增长的公开数据有限。
分析显示,自2016年以来,前沿模型最终训练运行的摊销硬件和能源成本以每年2.4倍的速度快速增长。Epoch AI还估算了开发关键前沿模型的成本分解,包括研发人员成本和实验计算成本。大部分开发成本是硬件成本,占47-67%,研发人员成本占29-49%,其余2-6%用于能源消耗。
如果培训成本持续增长的趋势持续下去,到2027年,最大规模的培训将花费超过10亿美元。
关键结果
Epoch AI的主要方法是基于硬件折旧和模型训练期间的能源消耗来计算训练成本。硬件成本包括AI加速芯片、服务器、互联硬件。Epoch AI使用来自开发人员或可信的第三方报告的信息来识别或估计给定模型的硬件类型和数量以及训练运行时间。Epoch AI还估计了在每个模型的最后训练运行期间硬件的能量消耗。
使用该方法,Epoch AI估计了45个前沿模型的训练成本,发现总体增长率为每年2.4倍。
作为一种替代方法,Epoch AI还计算了使用租用硬件在云中训练这些模型的成本。这种方法计算起来非常简单,因为云计算提供商对每芯片小时收取统一的费用,能源和互连成本也计入了价格。
使用这种方法,Epoch AI发现每年的增长率非常相似,为2.6倍,但由此产生的成本估计平均约为硬件和能源平摊方法估计的两倍。
影响
人工智能培训成本的快速增长带来了重大挑战。只有少数大型组织能够跟上这些费用,这可能会限制创新,并将影响力集中在前沿人工智能开发上。
支持199IT发展,可加入付费高端知识交流群,感谢!
199IT热门报告重点推荐,可直接点击查阅
报告:未来的数据经济 报告:产品详情页面最终指南 2024年亚太经合组织能源展望报告 2024年科技趋势展望 2023年音乐收听报告 2024年家族财富转移 2024年第二季度机器人报告 报告:加快煤炭行业的公平转型 2024年第二季度机器人报告 报告:加快煤炭行业的公平转型 2024年意见领袖营销报告 全球智能电网技术专利数据综述 2023-2024年印度旅游报告 2024年旅游和酒店业现状 扩大地球观测的全球价值报告 报告:非洲人工智能:产生影响的用例 2024年芯片行业概况 迈向绿色建筑价值链:中国及全球 2024年亚太地区手游市场报告 报告:解锁日本电子商务潜力 2024人工智能与政治 报告:全球数字工作的兴起 2023年瑞士电子商务报告 2024年第2期中国区域经济金融展望报告 2024年浪费广告支出报告 工作中的AI:亦敌亦友 气候变化对健康的影响报告 2024年化学品牌50强 2024年亚洲发展展望报告-7月刊 投资口腔健康全球承诺的经济合理性 生成式人工智能、心理健康和安全技术 2024年数字经济报告 2024年中型律师事务所的法律趋势 2023年开放数据成熟度(ODM)报告 2024年全球贸易监测快报 2024中国海港城市港口经济发展报告 2024年世界旅游晴雨表 2024供应链高管调查 报告:先进清洁技术制造业 2024年AI投资报告 报告:在不断变化的气候中确保工作安全与健康 报告:品牌信任维度 数字中国发展报告(2023年) 联合国劳工组织:童工报告 2023年中国停车行业发展白皮书 2023年全球私人资本参加基础设施投资报告 2024年第二季度企业生成式人工智能报告 2023年全球私人资本参加基础设施投资报告 2024年第二季度企业生成式人工智能报告 非洲自有品牌市场报告 2024年云指数报告 2023年灾害对农业和粮食安全的影响--中文版 2024年年度新闻研究报告 2024年Q2全球天然气市场报告 2024年数据和人工智能领导力报告 2023年的世界知识产权指标 2024年一季度全球黄金需求趋势报告 2024年4月全球金融稳定报告 报告:在AI驱动的未来成功所需的技能 女性参与旅游业的全球报告(第二版) 2023年美国出生率统计报告 2024年旅游胜地营销报告 2024年全球数字化工作的兴起 大逆转:全球开发协会国家的前景、风险和政策报告 2023年美国老年人住房报告 2023年中国专利调查报告 2024年世界经济展望报告--4月刊 报告:人人享有清洁烹饪的愿景 2024年人工智能指数报告 2024年全球网络安全前景 2024年研究行业报告 2024年美国消费者趋势报告 克服能源三难困境:安全和包容的转型 2023-2024年中国百货零售业发展报告 2023年儿童死亡率报告 2024年日本动漫行业从业者调查 中国移动经济发展报告2024 第53次中国互联网络发展状况统计报告
媒体商务合作
商务合作:admin@199it.com 公众号投稿邮箱:T@199it.com