高质量训练数据将耗尽?乌镇峰会“首发”数据合成与生产平台

11月 19 日下午,行业大模型、具身智能、算力、芯片、数据合成等10 项首发成果在乌镇峰会登台路演, 其中 AI 数据合成与生产平台AIGD(AI Generated Data)因聚焦“数据合成”获广泛关注。“未来的AI应用需要大量稀缺且难以获取的长尾数据,如自动驾驶中的极端天气与极端路况数据,具身智能训练所需要的复杂场景数据。在此背景下,数据合成成为关键。”蚂蚁数科AI科技技术负责人、蚂蚁天玑实验室主任李哲现场说道。

AI 发展正面临着高质量数据短缺的问题。近年来,伴随着大模型技术的快速发展,机器学习也正从“以模型为中心”转向“以数据为中心”,高质量数据可以更好地模拟客观世界,提升模型的准确性和稳定性,但是“到 2026 年,现存的用于 AI 模型训练的高质量语言数据将耗尽”,据Epoch AI Research研究团队预测。Gartner 表示,到 2030 年,合成数据将成为 AI 模型的主要训练数据来源;2024 年, 60% 的 AI 数据将是合成数据,被用于模拟、预测场景和降低风险。

记者在2024年世界互联网大会乌镇峰会了解到,AIGD平台是由蚂蚁数科申报的首发成果,平台可通过大规模合成互联网所不覆盖的高质量、高价值垂直语料数据,帮助科技厂商进行 AI 模型训练。记者了解到,AIGD具备 PB 级数据生产能力,支持数据从生成到训练全流程自动化处理,自动化率达到 80%,这极大提高了数据处理的效率和质量。此外,平台自研15 余种数据合成工具,目前可以合成图片、视频、3D模型、多模态图文视频对、多轮对话、语音信号、心率脑电信号、结构化交易数据等多模态数据,以满足多种应用场景下的 AI 模型训练需求。

业内人士普遍认为,“高质量数据”是 AI 大模型深入到产业的重要基础,没有好的数据做支撑,一切 AI 应用都是空中楼阁。近日,OpenAI员工爆料说,“新模型‘没有那么大飞跃’”,主要原因之一便是高质量数据不足所导致的。今年 9 月份, OpenAI 发布推理模型o1,带来了强化学习训练新范式,通过自博弈强化学习,将合成数据的形式训练给大模型,从而大幅增加大模型逻辑推理能力。

“数据合成”是蚂蚁数科 AIGD 平台的主要功能之一,此外还包括数据标注、质检等能力。在数据标注方面,通过人机协同进行标注,人工智能算法能够自动识别和预处理大部分基础信息,预标注模型依赖人工标注量降低了 70%以上。在数据质检方面,平台会根据元信息支持不同粒度的数据质量统计,最大程度理解数据,保证合成及标注后的数据符合预期质量要求。

记者注意到,蚂蚁数科今年陆续迭代发布了多款 AI 产品,包括大模型安全评测与防御产品“蚁天鉴”、反深伪造产品 ZOLOZ Deeper 等。作为一家面向 ToB 服务的科技公司,蚂蚁数科旗下主要包含“企业用云服务”“企业区块链服务”“企业AI服务”三大核心业务,李哲在乌镇峰会上表示,“我们即将迎来 AI 服务产业的黄金年代,蚂蚁数科将会坚定在 AI ToB 领域投入,让 AI 深入千行百业。”

以上就是关于【高质量训练数据将耗尽?乌镇峰会“首发”数据合成与生产平台】的相关消息了,希望对大家有所帮助!

Like (0)
广众网的头像广众网
Previous 2024年11月19日 下午7:09
Next 2024年11月19日 下午7:09

相关推荐

  • 诺诚健华:施一公夫妇成巨富,驻马店老乡市值腰斩丨正经深度

    文丨吕行 编辑丨杜海 来源丨正经社(ID:zhengjingshe) (本文约为3900字) 【正经社“医药新动力”观察之十】 国庆假期前的最后一个交易日,诺诚健华(688428)A股股价大涨11.07%,报收12.94元/股。在大A这波“牛市”行情的助推下,悄然创出阶段性新高。 此前的2024年9月23日,由于公告793.94万股首发战略配售股份将解禁上市…

    2024年10月6日
    2500
  • 被“仅退款”逼疯后,我专职帮卖家起诉白嫖党

    作者/王言 主编/苏淮 一次退货可能有很多逻辑起点,其中之一,可能是一条备受争议规则的制定。 2023年年末,淘宝、京东(NASDAQ:JD,09618.HK)相继更新了平台争议处理规则、售后服务规则,其中最令人瞩目的一项变动为:“某些情况下,消费者可以选择仅退款、不退货”。在此之前,“仅退款”功能已经在拼多多(NASDAQ:PDD)存在很长时间。 图片来源…

    2024年8月6日
    5600
  • 对欧电动车谈判必须“枪口一致对外”,团结一心才能共御“外敌”!

    . 近日,中央电视台旗下的“玉渊谭天”微博账号揭露了一则关乎中欧电动车谈判的重要内幕:在中欧双方紧锣密鼓谈判协商的关键节点,欧委会试图绕过正式谈判渠道——中国机电产品进出口商会,私下接触并约谈中方个别电动车企业,这种做法不仅不道德,也违背了国际贸易公平竞争和透明度的基本原则,极为不妥。 . 欧委会的这一不当行为,最初在中国机电商会10月17日的官方声明中予以…

    2024年10月25日
    900
  • 七部门:加强报废机动车回收监督管理工作

    商务部等七部门关于加强报废机动车回收监督管理工作的通知 商消费函〔2024〕592号 各省、自治区、直辖市及新疆生产建设兵团商务、发展改革、工业和信息化、公安、生态环境、交通运输、市场监管主管部门: 为加强报废机动车回收(含拆解,下同)监督管理,确保汽车以旧换新政策实施效果,维护广大群众利益,根据《报废机动车回收管理办法》(中华人民共和国国务院令第715号,…

    2024年10月16日
    1800
  • 无人机飞手月薪可过万,有骑手转岗

    图源:图虫 作者 | 何铭亮 实习记者 | 郑一一       编辑 | 高秋榕 “低空经济的蓬勃发展催生了无人机操控员这样一个新岗位。据有关部门测算,现在我国这个岗位的就业人才缺口高达100万人。”近日,国家发展改革委副主任李春临在国务院新闻办新闻发布会上如此表示。 无人机操控员是怎样一个职业? 从覆盖范围来看,物流运输、医疗运输、飞行培训、国土测绘、生态…

    2024年10月18日
    1900

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信