这篇论文回答了一个很实际的问题:标注数据不够时,MLE 智能体还能不能自动搭好训练流程。结果显示智能体在多数设定下能超过人工基线,但选哪个程序是个大坑,最多掉 47% 性能。做自动化机器学习或数据稀缺场景的工程团队值得看看。
#data labeling
给前沿模型造训练数据的 Mercor 又融资了,7.5 亿美元、估值 200 亿、年化收入 30 亿。它跟 Scale AI 是直接竞争对手,这轮数字能看出专家数据生意有多大。关注 AI 产业链和模型训练成本的人都该看看。
Nvidia 这次把钱投给了 Mercor 这家做 AI 训练数据的公司,说明 GPU 之外,高质量专业数据也成了兵家必争之地。做模型训练或数据标注的人可以看看这个行业动向,了解资本在往哪个环节流动。
机器人 demo 里总是一把成功,真实世界却会手滑,Memories Upload 从第一人称视频里抠出人无意识的小修正动作当训练数据。做具身智能或数据标注的团队值得对比一下它和遥操作采集的成本差异。
做机器人的朋友可以看看这个新数据平台:第一视角视频逐帧标注每只手的动作,能按动作检索片段直接拿来训练。相比自己搭遥操作采集,省了不少成本,每月还在上新数据。
机器人要学动手,靠的是大量真人手部操作视频。这家公司雇人录第一人称画面,按左右手动作逐帧打标签,做成能按动作搜索的训练数据卖给机器人实验室。做具身智能或模仿学习的团队可以直接关注这种数据源。
机器人圈常怪模型不行,这个团队反而去拍 20 多个行业里人类干活的视频,连手部动作都逐帧标注,已经有 3 家头部机器人实验室拿去训练了。做具身智能或关注数据瓶颈的都该看看这个思路。
Nathan Lambert 这次没有谈模型,而是谈专家数据怎么帮 AI 真正进入律师、医生这些长尾行业,还顺带讨论了 SWE 需求为何没崩。他给 Mercor 当顾问的披露也很坦诚。做数据标注、行业落地的团队值得看看这个视角。
The episode reveals how evaluation difficulty is shifting: models can recall domain rules yet fail at knowing when to apply them, which is precisely what RL environments are being built to fix. Teams building eval pipelines or training data strategies can study the live task walkthroughs to calibrate their own benchmark design. Against data vendors like Scale AI and Surge, Handshake's verticalised labs (life sciences, finance, alignment) show where specialist data demand is concentrating.
Latent Space 第一次拆数据实验室,主角是 Handshake 的 Garrett Lord。他们一年从零做到 10 亿美元估值,靠的是给 OpenAI、Anthropic 这类实验室供金融、生物、对齐领域的专家数据。做数据服务或评测创业的人能从中学到定价和交付的真实玩法。
纽约公司 Trinovation 把数据团队放到菲律宾,一年扩张 50 倍到 690 人,看得出数据标注业务正往东南亚转移。
谷歌开源了个新框架,让 AI 反过来帮你搞清楚自己的分类标准,做审核或数据标注的可以试试。
一份圈内人匿名投票,列出了真正给前沿模型供数据、定评测方向的公司排名,想了解这个圈子格局的可以看看。
搞机器人训练的可以看看,Perceptron 1.0 把第一人称视频标注从每小时 70 多美元砍到 9 美元起,还能免校准做 3D 手部重建。
标注太贵?这篇论文教你只用一部分人工标注,剩下的靠模型打标签也能训练,从线性回归到 LLM 微调都验证了。
做 Agent 调试的人可以看看,这个工具能读 LangSmith、Langfuse 等六种格式,自动和人工一起做步骤级标注,复现了 235 个标注单元。
做自动驾驶或机器人数据的团队可以看看,Voxel51 3.0 把找数据、标注、评估全打通了,还带 45+ 个 MCP 工具,有免费层。
Spending patterns diverge structurally: China's buyers are platforms building models in-house, while US demand flows through specialized data brokers and RL-environment providers. That split shapes who sells data services, which models get built, and how fast the gap closes. Investors and data-vendor operators tracking both markets should map their offerings against the in-house trend in China versus the API-outsourced model in the US.
3 分钟讲清训练数据这门生意的逻辑:为什么任务做到 70% 准确率就被扔掉,为什么大买家都选择自己造数据。
LoRA 作者之一 Edward Hu 跳去 Mercor 做训练,第一个模型还是基于 Qwen 的,数据供给侧这点变化挺有意思。
LinkedIn统计说美国新增75万个AI岗位,占最大头的是年薪5.1万美元的数据标注员,不是工程师,这组数字挺反直觉的。
一篇很实用的数据筛选流水线:40718 帧 maritime 视频只挑 220 张标注,微调 YOLO26-m 就能到 AP50 94.78%,标注成本省了 99.5%。
标注预算不够又想评估策略?这篇 arXiv 论文告诉你怎么分配人工标注最省钱,RMSE 能降一半以上。
标注对齐数据不用整段重写,定位到第一个错 token 改掉让模型接着生成,实验里中位时间省 52%,还附了 Panda-CVL 数据集。
国家数据局要搞词元增值订阅和按效付费,日均调用量已超500万亿,32个城市试点数据标注。
国家数据局公布了最新数据:12万个高质量数据集、1565 PB总量,比一季度涨了60%,相当于国图数字资源547倍。搞AI的看看数据家底。
xAI 暂停招募专业 AI 导师,暴露了自建数据团队的运营瓶颈,做 AI 数据标注或模型训练的团队值得关注这一调整背后的行业趋势。
数据标注团队和机器学习工程师终于能摆脱重复劳动——Adala 用自主智能体自动学习标注技能,大幅缩短项目周期,建议做数据预处理或模型训练的团队直接试试。