★ 4
彭博：医生、律师与工程师涌入 AI 时薪 400 美元标注经济
彭博报道称，AI 训练与数据标注市场正吸引医生、律师和工程师等专业人士参与，部分任务时薪可达 400 美元。高技能专家数据成为模型能力提升的稀缺资源，也催生新的零工经济形态与质量、保密争议。
Hacker News – AI15 天前
#数据标注
共 29 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 4
专家零工正训练AI取代自己
Mercor、Scale AI、Turing等公司正招募游戏理论、视频创作等领域专家，通过设计提示词和评分来训练前沿AI模型。这些高薪白领零工在提升模型能力的同时，也可能加速自身岗位被自动化取代。
快公司32 天前
★ 3
国家数据标注先行先试苏皖城市联盟在南京成立
在 2026 物理 AI 与世界模型大会上，国家数据标注先行先试苏皖城市联盟于南京成立，南京、芜湖等长三角 10 城将共建数据标注联合创新中心，协同发展数据标注产业，破解资源分散、标准不一、区域协同不足等痛点。
36氪13 天前
★ 3
研究：LLM 做机器翻译质量标注仍不可靠
论文在 70 个语对的长上下文测试集及 WMT23/WMT25 数据上，评估 LLM 在 MQM 与 ESA 两种机器翻译质量评估方案中与人类标注者的一致性。结果显示 LLM 与人类一致性在部分任务上超过人类之间的一致性，但跨方案、语对与领域波动很大，多数场景仍不可靠；人类在细粒度 MQM 与低资…
arXiv NLP23 天前
★ 3
岳麓大会观察：AI走出聊天框，湖南制造业成新基础设施
2026岳麓大会在长沙举行，AI+机器人、先进制造、脑机接口等论坛密集，1600平方米展区汇集68家企业156件展品。文章指出，当AI从数字世界进入物理世界，湖南的工程机械、矿山、制造经验与数据标注能力正成为AI落地的新型基础设施。湘江新区已集聚AI相关企业超1600家、规上营收440亿元，并建立…
36氪34 天前
★ 3
硅谷101播客：AI 数据行业野蛮生长
硅谷101 播客邀请 Scale AI 研究总监何允中与伯克利博士后孙一铀，拆解 AI 训练数据行业的商业模式。节目讨论 AfterQuery 估值从 3 亿涨至 32 亿美元、Bespoke Labs 融资 4000 万美元，以及 Rubric 评分标准、强化学习环境、benchmark 刷分与…
硅谷10135 天前
★ 3
★ 3
Snorkel AI 估值翻三倍至35亿
成立七年的Snorkel AI完成3.5亿美元E轮融资，估值翻三倍至35亿美元。该公司主打“数据即服务”，为AI模型提供训练数据。此轮融资反映出市场对高质量AI训练数据的旺盛需求。
TechCrunch AI40 天前
★ 3
EEG-to-Report：临床脑电图语言模型训练框架
提出浏览器端注释和特征文本框架，连接常规EEG审查与AI就绪数据集构建。集成多格式EEG摄入、交互式查看器和多模态注释层，生成对齐的特征文本对以监督多模态EEG语言模型。
arXiv cs.AI65 天前
★ 2
研究提出 Multi-Label Agreement 框架评估多标签标注一致性
论文提出 MLA 框架，保留每条样本完整二元标签向量，采用平均成对汉明一致度，兼顾共同选中与共同遗漏。框架支持 pooled-marginal、Gwet AC1 与固定基线归一化，输出条目级、标签级与语料级结果，并提供条件最小一致度诊断与 Python 实现。
arXiv NLP4 天前
★ 2
布朗大学学生绘制支撑 AI 的全球隐形劳动力地图
一名布朗大学学生梳理并呈现了为 AI 系统提供数据标注、内容审核等服务的全球隐形劳动力网络。报道揭示了 AI 产业光鲜表象背后的外包劳动链条与地域分布，引发对 AI 供应链伦理的关注。
Hacker News6 天前
★ 2
ANT-A 基准与 ANT-OR 多智能体标注框架发布
论文提出 ANT-A 基准，覆盖 7 个跨领域跨模态数据集，每实例含 5 个人工标注，用 Fleiss kappa 做分布感知评估。同时提出多智能体标注框架 ANT-OR，从正负反馈中蒸馏对比决策规则，agreement@>=2 准确率提升 4.5 点，与人类标注分布对齐度最高。
arXiv NLP6 天前
★ 2
印度工人拍摄工作过程用于训练 AI
BBC 报道称，印度部分工人被要求拍摄自己的日常工作过程，用于采集训练 AI 模型所需的数据。报道关注数据标注与采集链条中的劳动群体及其处境。
Hacker News – AI9 天前
★ 2
SLA-LENS 框架用大模型分析二语课堂互动
研究提出 SLA-LENS，一个端到端 LLM 辅助框架，将课堂转录文本连接至结构化教学标注与证据关联的描述性分析，基于互动主义二语习得理论捕捉学习者错误、教学功能与吸收/修正。应用于 40 份真实在线二语西班牙语课堂转录、超 2.1 万句级实例，并评估专有与开源模型含 QLoRA 适配。
arXiv NLP12 天前
★ 2
研究提出预测大模型零样本标注性能的方法
研究构建两个任务族共 461 个文本分类数据集，探讨能否预测大模型在新数据集上的标注表现。结果表明性能可在一定程度上被预测，且与强调模型自述置信度有用性的其他研究相反，内部对数概率是最具预测力的信号。
arXiv NLP12 天前
★ 2
CoDA 开源助手将标注手册开发从数周缩短至两小时
研究者发布开源工具 CoDA，让领域专家通过审查语言模型的错误预测迭代开发标注手册（codebook）。在无家可归者个案记录健康指标抽取与野生动物走私帖情感分类两个案例中，CoDA 达到接近专家手册的下游性能，开发时间从数周降至两小时，所需人工标注样本减少 5 倍。
arXiv NLP12 天前
★ 2
研究提出 EDIT 算法决定人机交互中哪些回复需编辑
论文将「决定哪些 AI 回复送交更昂贵编辑者修正」形式化为 Edit Discovery Optimization 问题，并提出在线算法 EDIT。在四个推理与事实问答基准上，EDIT 在编辑成本、漏检与误判之间取得优于直接 LLM 批量选择的权衡。
arXiv cs.LG13 天前
★ 2
主动学习能否纠正稀有类初始集偏差：AG News 与仇恨言论实验
研究在约 1% 稀有类占比下，比较随机采样与八种主动学习策略，考察其能否弥补初始标注集对目标类子群的覆盖偏差。AG News 上几乎所有策略都能找回被遗漏子群，但在 Measuring Hate Speech 上，基于不确定性的策略反而不如随机采样，判别式主动学习可找回 55% 且 F1 无明显损…
arXiv NLP18 天前
★ 2
BenCoDiC：孟加拉语政治新闻网络欺凌语料库发布
研究者发布孟加拉语语境化网络欺凌语料库BenCoDiC，包含来自100个YouTube视频及其讨论的50250条文本，保留字幕-评论-回复关系并采用九维星型模式组织。五个AI聊天机器人在标注可靠性上未达标，最终采用双层人工标注加专家核验，Fleiss κ与Krippendorff α均为0.86。…
arXiv NLP20 天前
★ 2
AXLE：用第一人称叙事激活标注者生活经验
arXiv 论文提出 AXLE 预标注阶段，通过场景小故事引导标注者进行轴向导引对话，并合成第一人称微叙事，在正式标注前返回给标注者。在针对移民、宗教和性别等模糊仇恨言论的 2x2 被试间研究（104 名标注者、30 个条目、1040 条标注）中，该方法提升了身份共鸣与伤害敏感度，同时增加了标签熵…
arXiv NLP20 天前
★ 2
论文呼吁以人为中心 AI 建模人类判断的模糊性
这篇立场论文指出，传统机器学习假设存在唯一确定的真值，常将人类标注差异聚合或视为噪声。作者主张转向建模合理解释空间，区分有意义的模糊性与标注噪声，并以此指导 AI 的表示、学习、评估、部署与治理。
arXiv cs.AI23 天前
★ 2
Goldsmith 发布：智能体标注定义优化流水线
论文提出 Goldsmith，一个智能体流水线，把少量专家标注的金标准样本转化为可复用的结构化标注定义，并将该定义视为可训练的文本对象。通过可执行结构化损失与 LLM 编辑器迭代修订，在提示优化对比中优于 OPRO、APE、PromptBreeder，并提升下游标注效果。
arXiv NLP24 天前
★ 2
人类劳动对AI而言基本不可见
一篇博客文章探讨了人类劳动在AI系统中基本不可见的现象，揭示了AI背后大量被忽视的人工标注和数据处理工作。文章呼吁关注AI供应链中的隐形劳动问题。
Hacker News – AI38 天前
★ 2
Meta最新AI噱头实为低薪人工
文章批评Meta的Muse AI产品背后依赖低薪人工劳动，所谓AI能力实为人力外包支撑。这揭示了AI产品宣传与实际人力成本之间的落差，引发对AI劳动伦理的关注。
Hacker News – AI39 天前
★ 2
AI给数据标注员的报酬有多少
一篇报道调查了AI训练数据标注人员的薪酬状况，揭示支撑AI模型训练背后的劳动力经济。文章关注数据标注这一隐形的AI产业链环节及其从业者待遇。属社会调查类内容。
Hacker News – AI39 天前
★ 2
AI 辅助生物多样性调查的定向复核方法
研究提出 ACORN 方法，将机器学习预测融入物种占据模型，并策略性地选择对下游生态分析最具信息量的样本交由专家复核。在相机陷阱与生物声学数据集上，该方法以显著更少的专家复核量恢复出接近全人工标注的生态结论。研究主张 ML 辅助科研流程应针对下游推断优化专家投入，而非仅优化分类器精度。
arXiv cs.LG39 天前
★ 1
AI 数据标注与评估外包公司 iungotech 登上 HN
Hacker News 上出现一家名为 iungotech 的 AI 数据标注与评估外包服务商链接，讨论热度极低（1 分、0 评论）。此类公司为模型训练与评测提供人工标注、RLHF 数据与质量评估服务，是 AI 产业链中常被忽视的一环。
Hacker News – AI10 小时前
★ 1
Paid.Expert：为训练AI寻找付费专家兼职
Paid.Expert 是一个撮合平台，帮助专家找到为训练 AI 模型提供数据的付费兼职机会。它切入的是 AI 训练数据标注与专家知识采集这一细分市场，属于数据供应链上的小型创业尝试。
Hacker News – AI27 天前
★ 1