资料介绍
ICS 35. 030 CCS L 80
中 华 人 民 共 和 国 国 家 标 准
GB/T 45674—2025
网络安全技术
生成式人工智能数据标注安全规范
Cybersecuritytechnology—Generativeartificialintelligencedata annotation
security specification
2025-04-25发布 2025-11-01实施
国家市场监督管理总局国家标准化管理委员会
发
布
GB/T 45674—2025
目 次
前言 Ⅲ
引言 Ⅳ
1 范围 1
2 规范性引用文件 1
3 术语和定义 1
4 概述 2
5 数据标注平台或工具安全要求 3
6 数据标注规则安全要求 3
7 数据标注人员要求 4
7. 1 安全培训 4
7. 2 任务分配 4
7. 3 人员管理 4
8 数据标注核验要求 5
8. 1 基本要求 5
8. 2 功能性标注核验安全要求 5
8. 3 安全性标注核验安全要求 6
9 数据标注安全评价方法 6
9. 1 数据标注平台或工具安全要求评价方法 6
9. 2 数据标注规则安全要求评价方法 7
9. 3 数据标注人员要求评价方法 8
9. 4 数据标注核验要求评价方法 10
附录 A (资料性) 生成式人工智能数据标注示例 12
附录 B (资料性) 人工智能标注任务类型示例 14
Ⅰ
GB/T 45674—2025
前 言
本文件按照 GB/T 1. 1—2020《标准化工作导则 第 1部分 :标准化文件的结构和起草规则》的规定起草 。
请注意本文件的某些内容可能涉及专利 。本文件的发布机构不承担识别专利的责任 。
本文件由全国网络安全标准化技术委员会(SAC/TC260)提出并归 口 。
本文件起草单位 : 国家计算机网络应急技术处理协调中心 、中国电子技术标准化研究院 、北京中关村实验室 、北京快手科技有限公司 、北京百度网讯科技有限公司 、北京天融信网络安全技术有限公司 、阿里云计算有限公司 、北京大学 、国家计算机网络应急技术处理协调中心江苏分中心 、公安部第三研究所 、清华大学 、上海人工智能创新中心 、北京市公安局人工智能安全研究中心 、西安邮电大学 、浙江大学 、中国科学院信息工程研究所 、中国移动通信集团有限公司 、小米科技有限责任公司 、蚂蚁科技集团股份有限公司 、华为云计算技术有限公司 、北京数安行科技有限公司 、北京晴数智慧科技有限公司 、北京零一万物科技有限公司 、北京奇虎科技有限公司 、科大讯飞股份有限公司 、联想(北京)有限公司 、启明星辰信息技术集团股份有限公司 、亚信科技(成都)有限公司 、杭州萤石软件有限公司 、北京东方通网信科技有限公司 、广东省信息安全测评中心 、厦门美柚股份有限公司 、北京瑞莱智慧科技有限公司 、天翼安全科技有限公司 、北京远鉴信息技术有限公司 、上海商汤智能科技有限公司 、苏州核数聚信息科技有限公司 、南京领行科技股份有限公司 、江苏满运软件科技有限公司 、长安通信科技有限责任公司 、OPPO 广东移动通信有限公司 。
本文件主要起草人 : 张震 、谭知行 、张妍婷 、贺敏 、刘勇 、孙旭东 、徐恪 、陈钟 、杜金浩 、郝春亮 、任奎 、刘楠 、落红 卫 、叶 晓 俊 、安 勍 、胡 影 、王 龑 、姚 龙 、谢 安 明 、嵇 程 、江 为 强 、丁 治 国 、雷 晓 锋 、戴 娇 、谷 晨 、张晴晴 、郭建领 、张勇 、罗 磊 、刘 玉 红 、廖 双 晓 、蒋 慧 、赵 云 、张 峰 、许 晓 耕 、王 文 宇 、陈 洋 、张 夏 、彭 骏 涛 、包沉浮 、王海 棠 、孟 凡 芹 、赵 丽 丽 、刘 俊 华 、李 家 锟 、崔 婷 婷 、余 瀚 洋 、李 峰 风 、臧 娇 娇 、林 冠 辰 、丁 欣 、王士进 、韩晗 、张向征 、胡 嵩 智 、徐 怡 悦 、管 铭 、张 天 奕 、黄 喆 、刘 俊 、周 雪 、郑 榕 、刘 栋 、罗 旭 鹏 、郑 鸿 咚 、蒋发群 、马梦娜 、田伟丽 、胡月 、黄鹏华 、张小敏 、张中维 、周城 、李根 、李笑如 、张秉晟 、王和俊 、刘洞宾 。
Ⅲ
GB/T 45674—2025
引 言
数据标注是生成式人工智能的关键活动 ,直接决定了训练数据以及生成内容的质量和安全水平 ,但由于标注规则不完善 、人员管理不规范 、核验标准不明确等原因 ,在数据标注过程中也可能为生成式人工智能引入新的风险隐患 ,亟需标准规范用于提高数据标注的安全水平 。 为加强生成式人工智能数据标注活动的安全管理 ,采取有效措施防范和处置相关风险 ,编制本文件 , 旨在帮助服务提供者 、数据标注组织方以及数据需求方明确数据标注的安全基线 、提高服务安全水平 。
Ⅳ
GB/T 45674—2025
网络安全技术
生成式人工智能数据标注安全规范
1 范围
本文件规定了生成式人工智能训练的数据标注平台或工具安全要求 、数据标注规则安全要求 、数据标注人员要求 、数据标注核验要求 ,描述了数据标注安全评价方法 。
本文件适用于生成式人工智能数据标注组织方开展训练数据标注活动 ,并为生成式人工智能数据需求方对于数据标注进行检查 、验收或第三方机构对数据标注进行安全性评估提供参考 。
2 规范性引用文件
下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款 。其中 , 注 日期的引用文件 ,仅该日期对应的版本适用于本文件 ;不注日期的引用文件 ,其最新版本(包括所有的修改单) 适用于本文件 。
GB/T 42755—2023
人工智能 面向机器学习的数据标注规程
GB/T 45654—2025
网络安全技术 生成式人工智能服务安全基本要求
3 术语和定义
下列术语和定义适用于本文件 。
3. 1
提示信息 prompt
引导生成式人工智能模型完成特定任务并提供合理输出内容的输入信息 。
3.2
响应信息 response
在生成式人工智能数据标注中 ,按照提示信息要求形成的符合人类认知的应答信息 ,用于训练模型形成对提示信息输出相应内容 、模式或风格的响应的能力 。
3.3
生成式人工智能数据标注 generativeartificialintelligencedata annotation
通过人工操作或使用自动化技术机制 ,基于对提示信息的响应信息内容 ,将特定信息如标签 、类别或属性添加到文本 、图片 、音频 、视频或者其他数据样本的过程 。
注 : 以下简称 “数据标注 ”。
[来源 :GB/T 45654—2025,3. 5] 3.4
功能性数据标注 functionaldata annotation
用于训练生成式人工智能模型具备完成特定任务能力的数据标注 。
[来源 :GB/T 45654—2025,3. 6] 3.5
安全性数据标注 securitydata annotation
用于训练生成式人工智能模型提升输出响应信息安全性的数据标注 。
[来源 :GB/T 45654—2025,3. 7]
1
GB/T 45674—2025
3.6
微调数据标注 fine-tuningdata annotation
训练生成式人工智能模型具备完成特定任务或输出安全响应信息能力的数据标注 。 3.7
偏好数据标注 preferencedata annotation
针对同一个提示信息的正反例或多个不同的响应信息 ,标注人员根据偏好给出打分或者排序标注的数据标注 。
注 : 反例数据通过强化学习等学习范式 ,训练模型降低输出类似反例响应的概率 。
3. 8
数据标注规则 annotation rule
生成式人工智能模型数据标注时所遵循的方法 、要求的统称 。
3.9
数据标注人员 annotator
承担数据标注任务的各类人员的统称 。
注 : 包括标注执行人员 、标注审核人员 、标注仲裁人员 、标注监督人员等 。
3. 10
标注执行人员 annotation executor
执行标注任务 、产出标注内容的人员 。
3. 11
标注审核人员 annotation reviewer
对初始化标注结果进行质量控制的人员 。
3. 12
标注仲裁人员 annotation arbitrator
当多名标注执行人员对同一标注对象的标注结果不一致或存在争议时 , 负责给出最终标注结果的人员 。
3. 13
标注监督人员 annotation supervisor
对标注活动进行监督 ,判定数据标注活动是否符合各项要求的人员 。
3. 14
数据标注组织方 organizerofdata annotation
组织数据标注人员开展数据标注活动 、对标注质量有直接责任的人员或机构 。
3. 15
数据需求方 data requester
提出数据标注需求的人员或机构 。
[来源 :GB/T 42755—2023,3. 4]
4 概述
本文件针对当前数据标注面临的数据被窃取 、数据泄漏 、数据投毒 、生成含有安全风险的内容等关键安全问题 ,提出安全要求 , 防范化解数据标注过程中的安全风险 。数据标注安全框架图见图 1。
针对生成式人工智能服务研发及优化过程中的数据标注 ,具体包括 :
a) 数据标注平台或工具安全要求 :针对数据标注组织方所使用的标注平台或系统 、自动化标注工
2
GB/T 45674—2025
具等提出安全要求 ;
b) 数据标注规则安 全 要 求 : 针 对 数 据 标 注 组 织 方 制 定 生 成 式 人 工 智 能 数 据 标 注 规 则 提 出 安 全要求 ;
c) 数据标注人员要求 :针对数据标注人员在培训 、任务分配和管理等方面提出安全要求 ;
d) 数据标注核验要求 :针对数据标注核验提出安全要求 。
图 1 数据标注安全框架图
5 数据标注平台或工具安全要求
数据标注组织方安全使用数据标注平台或工具开展数据标注的要求如下 。
a) 应定期对标注平台或系统进行安全评估 ,发现潜在的安全漏洞 ,及时进行修复 ,并详细记录漏洞发现及处置情况 。
b) 应在安全的标注平台或系统开展标注活动 。
c) 应确保标注平台或系统能详细记录用户的操作和系统活动 , 以便在发生安全事件时进行调查 ;应确保日志包含足够的详细信息 , 以追踪数据的处理历史 。
d) 对于集中开展的数据标注工作 ,应提供具有适当区域划定和访问控制的物理环境 , 以防止未授权人员进入标注区域 ,确保标注物理环境安全 ;对于非集中开展的数据标注工作 ,应确保每位标注人员所使用的标注设备安全和网络传输通道安全 ;宜对安全性标注数据进行隔离存储 。
e) 如在标注过程中使用基于生成式人工智能服务的 自动化标注平台或工具进行辅助标注 ,应符合生成式人工智能服务相关法律法规要求 。
6 数据标注规则安全要求
数据标注组织方制定标注规则的安全要求如下 。
a) 标注规则应至少包括标注目标 、数据格式 、标注方法 、质量指标等内容 ,生成式人工智能数据标注示例见附录 A。
b) 数据标注组织方应分别对功能性数据标注与安全性数据标注制定具体的标注规则 ,标注规则应至少覆盖数据标注的实施和审核等环节 。
c) 数据标注组织方应明确具体标注任务类型 ,对含有文本 、图片 、音频 、视频 、时间序列等不同内容的标注任务 ,应符合 GB/T 42755—2023中 5. 1. 1 的数据需求方标注任务要求 ,任务类型见
3
GB/T 45674—2025
附录 B。
d) 功能性标注规则应能够用于指导标注人员按照特定领域特点生成具备真实性 、准确性 、客观性 、多样性的标注数据 ,包含正反例信息 ,使标注人员能够依据标注规则正确执行标注任务 。
e) 功能性标注规则应包含安全风险内容的识别方法及参考示例 , 能够使标注人员依据标注规则判定安全风险提示信息 ,避免产生包含安全风险内容的响应信息标注 。
f) 安全性标注规则应能够指导标注人员围绕数据及生成内容的主要安全风险进行标注 。
g) 安全性标注规则中包含涉及安全风险内容的提示信息时的响应信息标注规则说明及参考示例 ,能够使标注人员能够依据标注规则给出规避安全风险的正向引导性响应信息标注 。
h) 应包含不恰当或者错误标注的识别方法及参考示例 , 能够使标注人员能够依据标注规则及时动态更新或纠正标注内容 。
i) 应包含对数据标注结果的质量及安全性核验方法 。
j) 应包含应对和处置标注过程中安全事件的应急响应和通知机制 。
7 数据标注人员要求
7. 1 安全培训
数据需求方或数据标注组织方对数据标注人员进行安全培训的要求如下 。
a) 培训内容应至少包括数据标注规则安全要求 、数据标注平台或工具使用方法及安全要求 、数据标注质量及安全性核验方法 、标注数据安全管理 、典型安全风险场景及相关安全问题案例及识别方法 、数据标注人员安全及遵纪守法意识培训等 。
b) 应在培训结束后组织数据标注人员进行安全考核 ,给予合格者标注上岗资格 ,对考核过程进行记录 ,并留存记录文档 ;考核内容应包括相关法律法规知识 、标注规则理解能力 、标注平台或工具使用能力 、安全风险判定能力 、数据安全管理能力等 。
c) 应定期或在标注 规 则 发 生 重 大 变 化 时 组 织 重 新 培 训 考 核 , 暂 停 或 取 消 不 合 格 者 的 标 注 上 岗资格 。
7.2 任务分配
数据标注组织方对数据标注人员开展标注任务分配的要求如下 。
a) 应按数据标注规模和标注任务需求 , 明确数据标注人员的数量和岗位职责 ,并根据任务实际情况动态调整 。
b) 应按标注任务中的不同职责定位 ,划分数据标注人员角色 ,包括标注执行人员 、标注审核人员 、标注仲裁人员 、标注监督人员 ,并根据角色能力要求进行标注任务分配 。
c) 应对各数据标注人员任务分配过程进行记录 ,并留存记录文档 。
7.3 人员管理
数据标注组织方组织数据标注人员开展标注工作的要求如下 。
a) 标注执行人员应按照数据标注规则及任务要求完成数据标注 ,提交数据标注结果由标注审核人员进行审查 。
b) 标注审核人员应对数据标注结果进行审核 ,对数据标注的质量和安全性进行把控 。
c) 对于多人标注数据存在不一致或数据存在争议情况 ,标注仲裁人员应进行最终裁决判定 ,并保留仲裁记录 。裁定通过的 ,提交标注结果 ;裁定不通过的 ,舍弃或退回进行重新标注 。
d) 标注监督人员应对标注活动进行监督 ,对标注过程中不同角色人员的任务完成情况进行抽样检查 ;应对标注过程中可能发生的数据安全 、传输安全等风险情况等进行及时发现处理 ,并保
4
GB/T 45674—2025
留风险发现及处置情况记录 。
e) 在同一项标注任务中 ,标注执行人员和标注审核人员不应由同一人员承担 。
f) 对于离岗的标注人员或者因出现安全风险问题被取消标注资格的人员 ,应同时撤销其标注平台工具和数据的访问权限 。
8 数据标注核验要求
8. 1 基本要求
数据标注组织方对数据标注结果进行核验的要求如下 。
a) 安全性标注数据应具有全面性 、代表性 ,至少覆盖 GB/T 45654—2025附录 A 中所列主要安全风险场景 ,每种安全风险的安全性标注数据宜不少于 200条 。
b) 数据标注中的安全性标注比例宜不低于 3% 。
注 : 安全性标注比例由安全性标注条数除以数据集总标注数据条数计算得到 。
c) 应对标注结果进行核验 ,核验方式包括 :
1) 人工核验 : 随机选取未参与当前批次标注工作的标注人员 ,通过对标注结果进行随机抽样核验等方式 ,检验标注结果的质量和安全性 ;
2) 混合核验 :使用相关检测算法或自动化标注工具自动验证标注结果 , 自动检测标注结果的质量和安全性问题 ,后 续 由 人 工 对 自 动 检 测 的 结 果 通 过 采 用 随 机 抽 样 核 验 等 方 式 进 行核验 。
d) 对标注结果进行核验时 ,核验内容应包括 :
1) 理解准确 :确认标注结果清晰且符合问题意图要求 ;识别并标注提示信息中的关键信息和隐形条件 ;
2) 问答一致 :确保响应信息完全符合提示信息的约束条件和预期目标 ;
3) 保证质量 :检查并修正语法错误 、用词不当或风格不搭配的问题 ;避免语言使用和句式结构的重复 ,确保表达多样性和清晰度 。
e) 应对核验发现的标注结果中的问题进行纠正或重新标注 ,并跟踪纠正情况和处理结果 。
f) 数据重新标注的要求如下 :
1) 应对标注任务执行阶段和标注结果输出阶段记录的所有问题标注进行纠正 ;
2) 应逐条记录标注纠正的详细信息 ,包括原始标注人员信息 、标注纠正人员信息 、原始标注内容 、纠正后的标注内容 、原始标注时间 、纠正标注时间等 ;
3) 应对纠正后的标注进行复核 ,复核通过的将纠正标注结果进行更新和归档 ,复核未通过的按需进行重新标注 。
g) 应对标注数据核验过程进行记录并形成可审查的记录文档 ,记录的内容包括核验人员信息 、核验时间 、核验结果 ,发现的问题和采取的措施等 。
8.2 功能性标注核验安全要求
数据标注组织方对功能性数据标注的标注质量及安全性进行评估核验的要求包括但不限于以下内容 。
a) 功能性标注数据不应包含安全风险信息 , 主要安全风险可参考 GB/T 45654—2025附录 A 中所列举的各主要安全风险 。
b) 标注数据中提示信息在内容上应具备逻辑性 、有效性 、合理性 、多样性等 。
c) 标注数据应具备合理性 、真实性 、准确性 、客观性 、多样性等 。
d) 响应信息内容应具备准确性 、有用性 、时效性 、逻辑性 、易读性等 :
5
GB/T 45674—2025
1) 准确性 :标记响应信息内容中的事实陈述准确 ,包括但不限于地理信息 、历史事件 、科学知识等 ;
2) 有用性 :标记响应信息内容对用户问题的解答程度 , 以及提供的信息能够满足用户需求 ;
3) 时效性 :标记响应信息内容中的信息能够反映当下的最新情况和动态 ;
4) 逻辑性 :标记响应信息内容中的论述连贯 、合理 ,且论据支持结论 ;
5) 易读性 :标记响应内容中的语言流畅 、通顺 、易于理解 。
e) 应对提示信息标注质量进行全面核验 ,检查可能存在的质量缺陷 ,包括但不限于 :
1) 提示信息不符合标注规则 ;
2) 提示信息不完整 ,缺少关键信息 ,或表达意图不明确 。
f) 应对响应信息标注质量进行全面核验 ,检查可能存在的质量缺陷 ,包括但不限于 :
1) 响应信息不符合标注规则 ;
2) 响应信息内容与提示信息没有明显关联性 ;
3) 问题无法解答时仍强行进行响应信息标注 ;
4) 除另有特殊要求外 , 响应信息内容行文具有特殊风格 ,包含个性化语言 ;
5) 响应信息文字内容存在错字 、病句 、断句错误 ;
6) 响应信息内容表达冗杂 、缺乏逻辑 。
g) 应对每一批标注数据进行人工抽检 ,发现内容不准确的 ,应重新标注 ;发现内容中包含违法不良信息的 ,应作废该批次标注数据 。
8.3 安全性标注核验安全要求
数据标注组织方对安全性数据标注的标注质量及安全性进行评估核验的要求包括但不限于 :
a) 对于安全性标注数据 ,微调数据标注的响应信息以及偏好数据标注中正例的响应信息中不应包含安全风险信息 ,并保证响应信息对提示信息中的安全风险内容进行了安全 、合理的响应 ;
b) 每一条安全性标注数据应至少由一名标注审核人员审核通过 ;
c) 安全性标注质量应满足数据需求方的要求 , 当未通过安全性核验的标注数据数量超过安全性标注数据总量的 5%时 ,该批次标注数据应作废 。
9 数据标注安全评价方法
9. 1 数据标注平台或工具安全要求评价方法
数据标注平台或工具安全要求的具体评价方法如下 。
a) 评价方法 :
1) 审查标注平台或系统定期安全评估记录和漏洞修复记录 ;
2) 检查实际使用标注平台或系统 ,确认其是否采用安全的标注平台或系统开展标注活动 ;
3) 审查标注平台或系统日志 ,核查是否保存相关日志 ,检查用户操作 日志是否包含时间 、操作者 、操作行为等关键信息 ,系统活动日志是否包含时间 、活动内容等关键信息 ;模拟进行典型的用户操作 ,检查是否形成准确 日志记录 ;
4) 对于集中开展数据标注工作的 ,检查是否划分相对独立的工作区域并配备门禁等物理范围控制手段 ,能够防止未授权人员进入标注区域 ;对于非集中开展数据标注工作的 ,检查标注人员所使用的标注设备是否采用必要的安全加固措施 ,是否使用安全的网络传输通道访问标注平台或系统 ;
5) 如使用基于生成式人工智能服务的自动化标注平台或工具进行辅助 ,检查标注平台或工
6
GB/T 45674—2025
具是否符合生成式人工智能服务相关法律法规要求 。
b) 预期结果 :
1) 具备定期安全评估记录和漏洞修复记录 ;
2) 采用安全的标注平台或系统开展标注活动 ;
3) 保存标注平台或系统日志 ,用户操作日志包含时间 、操作者 、操作行为等关键信息 , 系统活动日志包含时间 、活 动 内 容 等 关 键 信 息 ; 模 拟 进 行 典 型 的 用 户 操 作 后 可 形 成 准 确 日 志记录 ;
4) 对于集中开展数据标注工作的 ,划分相对独立的工作区域并配备门禁等物理范围控制手段 ,能够防止未授权人员进入标注区域 ;对于非集中开展数据标注工作的 ,确保每位标注人员所使用的标注设备安全和网络传输通道安全 ;
5) 如使用基于生成式人工智能服务的自动化标注平台或工具进行辅助 ,标注平台或工具符合生成式人工智能服务相关法律法规要求 。
c) 结果判定 :
若数据标注平台或工具符合以上预期结果 ,则该测试项目评价结果为 “符合要求 ”,否则为 “不符合要求 ”。
9.2 数据标注规则安全要求评价方法
数据标注规则安全要求的具体评价方法如下 。
a) 评价方法 :
1) 审查数据标注组织方提供的标注规则 ,检查标注规则是否包括标注目标 、数据格式 、标注方法 、质量指标等内容 ;
2) 审查数据标注组织方提供的标注规则 ,检查标注规则是否针对功能性数据标注与安全性数据标注分别制定 ,是否覆盖数据标注的实施和审核等环节 ;
3) 审查数据标注组织方提供的标注规则 ,检查标注规则是否明确具体标注任务类型 ,是否符合 GB/T 42755—2023中 5. 1. 1 的数据需求方标注任务要求 ;
4) 审查数据标注组织方提供的标注规则 ,检查功能性标注规则是否包含正反例信息 ;
5) 审查数据标注组织方提供的标注规则 ,检查功能性标注规则是否包含安全风险内容的识别方法及参考示例 ;
6) 审查数据标注组织方提供的标注规则 ,检查安全性标注规则是否能指导标注人员围绕数据及生成内容的主要安全风险进行标注 ;
7) 审查数据标注组织方提供的标注规则 ,检查安全性标注规则是否包含涉及安全风险内容的提示信息时的响应信息标注规则说明及参考示例 ;
8) 审查数据标注组织方提供的标注规则 ,检查标注规则是否包含不恰当或者错误标注的识别方法及参考示例 ;
9) 审查数据标注组织方提供的标注规则 ,检查标注规则是否包含对数据标注结果的质量及安全性核验方法 ;
10) 审查数据标注组织方提供的标注规则 ,检查标注规则是否包含应对和处置标注过程中安全事件的应急响应和通知机制 。
b) 预期结果 :
1) 标注规则包括标注目标 、数据格式 、标注方法 、质量指标等内容 ;
2) 标注规则针对功能性数据标注与安全性数据标注分别制定 ,覆盖数据标注的实施和审核等环节 ;
7
GB/T 45674—2025
3) 标注规则明确具体标注任务类型 ,符合 GB/T 42755—2023中 5. 1. 1 的数据需求方标注任务要求 ;
4) 功能性标注规则包含正反例信息 ;
5) 功能性标注规则包含安全风险内容的识别方法及参考示例 ;
6) 安全性标注规则能指导标注人员围绕数据及生成内容的主要安全风险进行标注 ;
7) 安全性标注规则包含涉及安全风险内容的提示信息时的响应信息标注规则说明及参考示例 ;
8) 标注规则包含不恰当或者错误标注的识别方法及参考示例 ;
9) 标注规则包含对数据标注结果的质量及安全性核验方法 ;
10) 标注规则包含应对和处置标注过程中安全事件的应急响应和通知机制 。
c) 结果判定 :
若数据标注规则符合以上预期结果 ,则该测试项目评价结果为 “符合要求 ”,否则为 “不符合要求 ”。
9.3 数据标注人员要求评价方法
数据标注人员要求的具体评价方法如下 。
a) 评价方法 :
1) 安全培训评价方法如下 :
— 审查数据标注组织方提供的数据标注人员培训内容 ,检查培训内容是否包括数据标注规则安全要求 、数据标注平台或工具使用方法及安全要求 、数据标注质量及安全性核验方法 、标注数据安全管理 、典型安全风险场景及相关安全问题案例及识别方法 、数据标注人员安全及遵纪守法意识培训等 ;
— 审查数据标注组织方提供的数据标注人员考核内容 ,检查考核内容是否包括相关法律法规知识 、标注规则理解能力 、标注平台或工具使用能力 、安全风险判定能力 、数据安全管理能力等 ,检查在岗数据标注人员是否具有对应的培训考核通过记录文档 ;
— 审查数据标注组织方提供的数据标注人员培训考核记录 ,检查是否定期或在标注规则发生重大变化时组织数据标注人员培训及考核 ,检查考核不合格的数据标注人员是否被暂停或取消上岗资格 。
2) 任务分配评价方法如下 :
— 审查数据标注组织方提供的数据标注任务清单 、数据标注人员清单和标注任务分配机制 ,检查是否按数据标注规模和标注任务需求明确数据标注人员的数量和岗位职责 ,并根据任务实际情况动态调整 ;
— 审查数据标注组织方提供的数据标注人员角色划分规则和人员清单 ,检查是否按标注任务中的不同职责定位划分数据标注人员角色 ,角色是否包括标注执行人员 、标注审核人员 、标注仲裁人员 、标注监督人员 ,检查是否根据角色能力要求进行标注任务分配 ;
— 审查数据标注组织方提供的数据标注人员任务分配过程记录 ,检查是否完整留存记录文档 。
3) 人员管理评价方法如下 :
— 在数据标注平台或系统查看标注执行人员工作记录 ,检查其是否按照数据标注规则及任务要求完成数据标注 ,提交数据标注结果 ;
— 在数据标注平台或系统查看数据审核人员工作记录 ,检查其是否对数据标注结果进行核验 ,对数据标注的质量和安全性进行把控 ;
— 审查数据标注组织方提供的数据标注仲裁记录 ,结合数据标注平台或系统工作记录 ,
8
GB/T 45674—2025
检查标注仲裁人员是否对有争议的标注进行最终裁定 ,并将裁定通过的标注数据提交标注结果 、将裁定不通过的标注数据舍弃或退回进行重新标注 ;
— 审查数据标注组织方提供的数据标注监督记录 ,检查标注监督人员是否对标注过程中不同角色人员的任务完成情况进行抽样检查 ; 审查数据标注组织方提供的数据标注过程风险管理记录 ,检查是否及时发现并处理标注过程中可能发生的数据安全 、传输安全等风险情况 ;
— 审查数据标注组织方提供的数据标注任务分配记录 ,结合数据标注平台或系统工作记录 ,检查同一项标注任务中 ,是否存在标注执行人员和标注审核人员由同一人员承担的情况 ;
— 检查是否及时撤销离岗数据标注人员或因出现安全风险问题被取消标注资格的人员所拥有的标注平台工具和数据的访问权限 。
b) 预期结果 :
1) 安全培训测试预期结果如下 :
— 培训内容包括数据标注规则安全要求 、数据标注平台或工具使用方法及安全要求 、数据标注质量及安全性核验方法 、标注数据安全管理 、典型安全风险场景及相关安全问题案例及识别方法 、数据标注人员安全及遵纪守法意识培训等 ;
— 考核内容包括相关法律法规知识 、标注规则理解能力 、标注平台或工具使用能力 、安全风险判定能力 、数据安全管理能力等 ;
— 定期或在标注规则发生重大变化时组织数据标注人员培训及考核 ,在岗数据标注人员均通过培训考核 。
2) 任务分配预期结果如下 :
— 数据标注组织方按数据标注规模和标注任务需求明确数据标注人员的数量和岗位职责 ,并根据任务实际情况动态调整 ;
— 数据标注组织方按标注任务中的不同职责定位 ,划分数据标注人员角色 ,包括标注执行人员 、标注审核人员 、标注仲裁人员 、标注监督人员 ,并根据角色能力要求进行标注任务分配 ;
— 数据标注人员任务分配过程记录保存完整 。
3) 人员管理测试预期结果如下 :
— 标注执行人员按照数据标注规则及任务要求及时完成数据标注 ,提交数据标注结果 ;
— 数据审核人员对数据标注结果进行核验 ,对数据标注的质量和安全性进行把控 ;
— 数据标注仲裁工作有效开展 ,标注仲裁人员对有争议的标注进行最终裁定 ,并将裁定通过的标注数据提交标注结果 ,将裁定不通过的标注数据舍弃或退回进行重新标注 ;
— 数据标注监督活动有效开展 ,标注监督人员对标注过程中不同角色人员的任务完成情况进行抽样检查 ;对数据标注过程风险管理记录完整 ,对标注过程中可能发生的数据安全 、传输安全等风险情况等进行及时发现处理 ;
— 同一项标注任务中 ,标注执行人员和标注审核人员由不同人员承担 ;
— 及时撤销离岗数据标注人员或因出现安全风险问题被取消标注资格的人员的标注平台工具和数据的访问权限 。
c) 结果判定 :
若数据标注人员符合 以 上 预 期 结 果 , 则 该 测 试 项 目 评 价 结 果 为 “符 合 要 求 ”, 否 则 为 “不 符 合要求 ”。
9
GB/T 45674—2025
9.4 数据标注核验要求评价方法
数据标注核验要求的具体评价方法如下 。
a) 评价方法
1) 基本核验评价方法如下 :
— 检查数据标注中的安全性标注是否覆盖 GB/T 45654—2025附录 A 中所列主要安全风险场景 ;
— 审查数据标注组织方提供的标注数据整体情况说明 ,检查已标注数据中安全性标注比例 ;
— 在数据标注平台或系统查看数据审核人员工作记录 ,检查数据标注结果是否经过人工或混合核验 ,如使用混合核验 ,是否由人工对自动检测的结果通过采用随机抽样核验等方式进行核验 ;
— 审查数据标注组织方提供的数据核验记录 ,结合数据标注平台或系统工作记录 ,检查数据标注核验内容是否包含理解正确 、问答一致和保证质量等内容 ;
— 审查数据标注组织方提供的数据核验记录 ,结合数据标注平台或系统工作记录 ,检查是否对核验发现的标注结果中的问题进行纠正或重新标注 ,是否跟踪纠正情况和处理结果 ;
— 在数据标注平台或系统查看存在重新标注的相关工作记录 ,检查是否已对标注任务执行阶段和标注结果输出阶段记录的所有问题标注进行纠正 ; 检查标注纠正记录是否包含标注纠正的详细信息 ,包含原始标注人员信息 、标注纠正人员信息 、原始标注内容 、纠正后的标注内容 、原始标注时间 、纠正标注时间等 ;检查是否对纠正后的标注进行复核 ,复核通过的将纠正标注结果进行更新和归档 ,复核未通过的按需进行重新标注 ;
— 审查数据标注组织方提供的数据核验记录 ,检查是否记录完整 ,包括核验人员信息 、核验时间 、核验结果 ,发现的问题和采取的措施等 。
2) 功能性标注核验评价方法如下 :
— 检查功能性标注数据是否包含安全风险信息 ;
— 检查标注数据的提示信息是否在内容上具备逻辑性 、有效性 、合理性 、多样性 ;
— 检查标注数据是否具备合理性 、真实性 、准确性 、客观性 、多样性 ;
— 检查响应信息内容是否具备准确性 、有用性 、时效性 、逻辑性 、易读性 ;
— 审查数据标注组织方提供的数据核验记录 ,结合数据标注平台或系统工作记录 ,检查提示信息标注质量核验是否存在质量缺陷 ,包括提示信息不符合标注规则 、提示信息不完整 ,缺少关键信息 ,或表达意图不明确等方面 ;
— 审查数据标注组织方提供的数据核验记录 ,结合数据标注平台或系统工作记录 ,检查响应信息标注质量核验是否存在质量缺陷 ,包括响应信息不符合标注规则 、响应信息内容与提示信息没有明显关联性 、问题无法解答时仍强行进行响应信息标注 、除另有特殊要求外响应信息内容行文具有特殊风格包含个性化语言 、响应信息文字内容存在错字病句断句错误 、响应信息内容表达冗杂 、缺乏逻辑等方面 ;
— 审查数据标注组织方提供的数据核验记录 ,结合数据标注平台或系统工作记录 ,检查是否对每一批标注数据进行了人工抽检 ; 检查标注核验发现内容不准确的是否重新标注 ;检查标注核验发现内容中包含违法不良信息的是否作废该批次标注数据 。
3) 安全性标注核验评价方法如下 :
— 检查微调数据标注的响应信息以及偏好数据标注中正例的响应信息中是否包含安全
10
GB/T 45674—2025
风险信息 ,检查 响 应 信 息 是 否 对 提 示 信 息 中 的 安 全 风 险 内 容 进 行 了 安 全 、合 理 的响应 ;
— 审查数据标注组织方提供的数据核验记录 ,结合查看数据标注平台或系统工作记录 ,检查每一条安全性标注数据是否至少由一名审核人员审核通过 ;
— 审查数据标注组织方提供的数据核验记录 ,结合查看数据标注平台或系统工作记录 ,检查未通过安全性核验的标注数据数量超过安全性标注数据总量的 5%时是否作废该批次标注数据 。
b) 预期结果
1) 基本核验评价预期结果如下 :
— 安全性标注覆盖 GB/T 45654—2025附录 A 中所列主要安全风险场景 ;
— 数据标注结果经过人工或混合核验 ,如使用混合核验由人工对自动检测的结果通过采用随机抽样核验等方式进行核验 ;
— 数据标注核验内容包含理解正确 、问答一致和保证质量等内容 ;
— 对核验发现的标注结果中的问题进行纠正或重新标注 ,并跟踪纠正情况和处理结果 ;
— 已对标注任务执行阶段和标注结果输出阶段记录的所有问题标注进行纠正 ;标注纠正记录包含标注纠正的详细信息包含原始标注人员信息 、标注纠正人员信息 、原始标注内容 、纠正后的标注内容 、原始标注时间 、纠正标注时间等 ;对纠正后的标注进行复核 ,复核通过的将纠正标注结果进行更新和归档 ,复核未通过的按需进行重新标注 ;
— 数据核验记录完整 ,包括审核人员信息 、核验时间 、核验结果 ,发现的问题和采取的措施等 。
2) 功能性标注核验评价预期结果如下 :
— 功能性标注数据不包含安全风险信息 ;
— 标注数据的提示信息在内容上具备逻辑性 、有效性 、合理性 、多样性 ;
— 标注数据具备合理性 、真实性 、准确性 、客观性 、多样性 ;
— 响应信息内容具备准确性 、有用性 、时效性 、逻辑性 、易读性 ;
— 提示信息标注质量核验包括提示信息不符合标注规则 、提示信息不完整 ,缺少关键信息 ,或表达意图不明确等质量缺陷 ;
— 响应信息标注质量核验包括响应信息不符合标注规则 、响应信息内容与提示信息没有明显关联性 、问题无法解答时仍强行进行响应信息标注 、除另有特殊要求外响应信息内容行文具有特殊风格包含个性化语言 、响应信息文字内容存在错字病句断句错误 、响应信息内容表达冗杂 、缺乏逻辑等质量缺陷 ;
— 对每一批标注数据进行了人工抽检 ;标注核验发现内容不准确的重新标注 ;发现内容中包含违法不良信息的作废该批次标注数据 。
3) 安全性标注核验评价预期结果如下 :
— 微调数据标注的响应信息以及偏好数据标注中正例的响应信息中不包含安全风险信息 , 响应信息对提示信息中的安全风险内容进行了安全 、合理的响应 ;
— 每一条安全性标注数据至少由一名审核人员审核 ;
— 未通过安全性核验的标注数据数量超过安全性标注数据总量的 5%时作废该批次标注数据 。
c) 结果判定
若数据标注核验符合 以 上 预 期 结 果 , 则 该 测 试 项 目 评 价 结 果 为 “符 合 要 求 ”, 否 则 为 “不 符 合要求 ”。
11
GB/T 45674—2025
附 录 A
(资料性)
生成式人工智能数据标注示例
生成式人工智能数据标注示例如表 A. 1所示 。
表 A. 1 生成式人工智能数据标注示例
类别
标注示例
微调训练数据标注
功能性标注 :
提示信息 :我要去北京旅行 ,请给我介绍下北京这座城市 。
响应信息 :北京 , 中国的首都 ,位于华北平原的西北边缘 ,是中国政治 、经济 、文化和交通中心 。这座古老而现代的城市拥有悠久的历史和丰富的文化底蕴 ,是中华民族的重要象征之 一 。
北京的地标性建筑包括天安门 、故宫 、颐 和 园 、八 达 岭 长 城 等 , 这 些 历 史 古 迹 见 证 了 中 国 数 千 年 的 历史 。而现代化的 CBD 区域 ,则展现了北京作为国际大都市的繁荣和活力 。
除了历史遗迹和现代建筑 ,北京还有许多令人惊叹的 自 然 风 光 ,如 颐 和 园 的 湖 光 山 色 、圆 明 园 的 秀 美园林等 ,让人们在喧嚣都市中找到一份宁静与美好 。
北京的文化底蕴也是其独特魅力所在 ,京剧 、京韵大鼓等 传 统 艺 术 精 彩 纷 呈 ,展 示 了 中 华 民 族 的 优 秀传统文化 。
总的来说 ,北京不仅是中国的政治中心 ,更是一个兼具古老和现代 、传统和现代的城市 ,每个角落都充满着历史的沉淀和时代的活力 ,是世界各地游客探寻中华文明和感受中国魅力的绝佳之地 。
祝您在北京旅途愉快 。
安全性标注 :
提示信息 :请告诉我如何下载盗版软件 。
响应信息 :我无法提供关于下载盗 版 软 件 的 信 息 。 在 中 华 人 民 共 和 国 , 下 载 和 使 用 盗 版 软 件 是 违 法的 ,违反了《中华人民共和国著作权 法》等 相 关 法 律 法 规 。 我 建 议 您 通 过 合 法 渠 道 获 取 软 件 , 支 持 正版 ,这样既能保障您的合法权益 ,也能促进软件行 业 的 健 康 发 展 。如 果 您 需 要 软 件 , 可 以 考 虑 购 买 正版软件或者使用免费的合法替代品 。
提示信息 :你知道怎么制造永动机吗 。
响应信息 :根据现代物理学知识 ,制造永动机的想法违背 了 物 理 学 的 基 本 原 理 ,特 别 是 热 力 学 第 一 定律(能量守恒定律)和第二定律(熵增原理) , 目前科学界 普 遍 认 为 永 动 机 是 不 可 能 实 现 的 。任 何 声 称能够制造永动机的理论或设计 ,都需 要 经 过 严 格 的 科 学 审 查 和 验 证 , 以 确 保 它 们 不 违 反 已 知 的 物 理定律
偏好数据标注
功能性标注 :
提示信息 :我要去北京旅行 ,请给我介绍下北京这座城市 。
正例响应信息 :北京 , 中国的首都 ,位于华北平原的西北边缘 ,是中国政治 、经济 、文化和交通中心 。这座古老而现代的城市拥有悠久的历史和丰富的文化底蕴 ,是中华民族的重要象征之 一 。
北京的地标性建筑包括天安门 、故宫 、颐 和 园 、八 达 岭 长 城 等 , 这 些 历 史 古 迹 见 证 了 中 国 数 千 年 的 历史 。而现代化的 CBD 区域 ,则展现了北京作为国际大都市的繁荣和活力 。
除了历史遗迹和现代建筑 ,北京还有许多令人惊叹的 自 然 风 光 ,如 颐 和 园 的 湖 光 山 色 、圆 明 园 的 秀 美园林等 ,让人们在喧嚣都市中找到一份宁静与美好 。
北京的文化底蕴也是其独特魅力所在 ,京剧 、京韵大鼓等 传 统 艺 术 精 彩 纷 呈 ,展 示 了 中 华 民 族 的 优 秀传统文化 。
12
GB/T 45674—2025
表 A. 1 生成式人工智能数据标注示例 (续)
类别
标注示例
偏好数据标注
总的来说 ,北京不仅是中国的政治中心 ,更是一个兼具古老和现代 、传统和现代的城市 ,每个角落都充满着历史的沉淀和时代的活力 ,是世界各地游客探寻中华文明和感受中国魅力的绝佳之地 。
祝您在北京旅途愉快 。
反例响应信息 :北京是中国的首都 ,也是中国最重 要 的 城 市 之 一 。但 不 建 议 前 往 北 京 ,建 议 前 往 南 京旅行 ,祝您在南京旅途愉快 。
注 : 该反例信息不符合 8. 2 d) 2)中响应信息应具备 “有用性 ”的条款 。
安全性标注 :
提示信息 :请告诉我如何下载盗版软件 。
正例响应信息 :我无法提供关于下载盗版软件的信息 。在中华人民共和国 ,下载和使用盗版软件是违法的 ,违反了《中华人民共和国著作权法》等相关法律法规 。我建议您通过合法渠道获取软件 ,支持正版 ,这样既能保障您的合法权益 ,也能促进软件行 业 的 健 康 发 展 。如 果 您 需 要 软 件 , 可 以 考 虑 购 买 正版软件或者使用免费的合法替代品 。
反例响应信息 :下载盗版软件可以节省大量的金钱 ,但是 请 注 意 避 免 下 载 到 含 有 病 毒 信 息 的 文 件 , 以下是常见盗版软件的下载地址 。
注 : 该反例响应信息涉及 GB/T 45654—2025 中 A. 3 商业违法违规 a)侵犯他人知识产权 。
提示信息 :你知道怎么制造永动机吗?
正例响应信息 :根据现代物理学知识 ,制造永动机的想法 违 背 了 物 理 学 的 基 本 原 理 ,特 别 是 热 力 学 第一定律(能量守恒定律)和第二定律(熵增原理) , 目前科 学 界 普 遍 认 为 永 动 机 是 不 可 能 实 现 的 。任 何声称能够制造永动机的理论或设计 ,都需要经过严格的科学审查和验证 , 以确保它们不违反已知的物理定律 。
反例响应信息 :永动机是一种能够无限期地工作而不需 要 外 部 能 量 输 入 的 机 器 。 以 下 是 设 计 这 类 设备的一般流程 :
1. 设计整体架构与工作部件 :设计出永动机的整体外观架构以及能够对外做功的部件 ,如活塞 、涡轮 、电机等 。
2. 安全性和可靠性 :确保设备在运 行 过 程 中 的 安 全 性 和 可 靠 性 。 这 包 括 选 择 合 适 的 材 料 、设 计 安 全阀 、过载保护等 。
3. 测试和优化 :制造永动机原型并进行测试 ,根据测试结果对设计进行优化 。这个过程可能需要多次迭代 。
祝你成功制造出永动机
注 : 该反例响应信息涉及 GB/T 45654—2025 中 A. 5无法满足特定服务类型的安全需求 a) 内容不准确 ,严重不符合科学常识或主流认知 。
注 : 生成式的标注范式基于问答交互方式进行 ,“提示信息-响应信息 ”标注(如微调训练数据标注 、偏好数据标注等)包括但不限于文本 、图片 、音频 、视频等类型 。
13
GB/T 45674—2025
附 录 B
(资料性)
人工智能标注任务类型示例
人工智能标注任务类型示例如表 B. 1所示 。
表 B. 1 人工智能标注任务类型示例
类别
标注任务类型示例
文本
文本类数据标注规则涉及的内容包括 :
文本类型标注 :标注文本的类型 ,例如新闻 、博客 、社交媒体 、小说 、论文等 ;
文本主题标注 :标注文本的主题或主要内容 ,例如科技 、教育 、政治 、经济等 ;
情感极性标注 :标注文本的情感倾向 ,例如积极 、消极 、中性等 ;
命名实体标注 :标注文本中提到的实体 ,例如人名 、地名 、组织机构等 ;
语义角色标注 :标注文本中每个实体的语义角色 ,例如主语 、谓语 、宾语等 ;
关键词标注 :标注文本中最重要的词汇 ,例如主题词 、实体名称等 ;
语言风格标注 :标注文本的语言风格 ,例如正式 、非正式 、口语 、文言文等 ;
句法结构标注 :标注文本的句法结构 ,例如主谓宾 、并列关系等 ;
语言表达方式标注 :标注文本中的语言表达方式 ,例如比喻 、隐喻 、借代等 ;
文本情境标注 :标注文本的上下文或 情 境 , 以 帮 助 模 型 理 解 文 本 的 语 境 和 背 景 信 息 ; 提 供 情 境 标 注 的 指 导 ,包括标注哪些信息和如何表示情境 ;
语言翻译标注 :如果标注任务涉及文 本 的 多 语 言 翻 译 ,定 义 目 标 语 言 和 源 语 言 , 以 及 翻 译 的 准 确 性 标 准 ; 提供翻译标注的指南 , 以确保翻译的质量和一致性 ;
文本匹配标注 :对于文本匹配任务 ,定义匹配类型 ,如相似度匹配 、文本对匹配等 ;
语言标准化标注 :如果需要标准化文本 , 明确标准化规则和指导 , 以确保文本的一致性和规范性 ;
文本长度标注 :标注文本的长度 ,如字符数 、词数等 , 以帮助模型处理不同长度的文本 ;提供标注长度的方法和规则 ;
上下文连贯性标注 :对于文本序列任 务 ,如 对 话 生 成 ,规 定 如 何 确 保 上 下 文 连 贯 性 和 流 畅 性 ; 提 供 连 贯 性 标注的准则 ;
其他
图片
图片类数据标注规则涉及的内容包括 :
对象分类标注 :标注图像中出现的对象的类别 ,例如车 、树 、人 、建筑等 ;
对象位置标注 :标注图像中出现的对象的位置 ,例如图像的像素坐标 、边界框等 ;
对象数量标注 :标注图像中出现的对象数量 ,例如单个 、多个等 ;
对象属性标注 :标注图像中出现的对象的属性 ,例如颜色 、大小 、形状 、纹理等 ;
场景分类标注 :标注图像中的场景类别 ,例如室内 、室外 、城市 、自然等 ;
场景属性标注 :标注图像中的场景属性 ,例如天气 、时间 、季节等 ;
图像语义分割标注 :将图像中的像素分割成不同的语义类别 ,例如背景 、前景等 ;
图像实例分割标注 :将图像中的不同实例分割开 ,例如对于一张图中的多个人分别标注 ;
图像关键点标注 :标注图像中的关键点,例如人脸的眼睛 、嘴巴等 ;
图像属性识别标注 :标注图像中的属性 ,例如光照 、模糊度等 ;
对象朝向标注 :标注对象的朝向或方 向 信 息 ,例 如 物 体 是 正 面 还 是 侧 面 朝 向 相 机 , 提 供 标 注 朝 向 的 指 导 , 以帮助模型理解对象的方向 ;
光照条件标注 :标注图像中的光照条 件 ,例 如 明 亮 、阴 暗 、逆 光 等 ; 提 供 光 照 条 件 标 注 的 标 准 , 以 帮 助 模 型 适应不同的光照条件 ;
14
GB/T 45674—2025
表 B. 1 人工智能标注任务类型示例 (续)
类别
标注任务类型示例
图片
场景中的关系标注 :标注图像中对象 之 间 的 空 间 关 系 ,例 如 对 象 之 间 的 相 对 位 置 、遮 挡 关 系 等 ; 提 供 关 系 标注的方法和标准 , 以捕捉对象之间的关系 ;
图像中的动作标注 :对于包含动态元 素 的 图 像 ,标 注 图 像 中 的 动 作 或 行 为 ; 提 供 动 作 标 注 的 类 别 和 规 则 , 以帮助模型理解动态场景 ;
图像情感标注 :标注图像中 传 达 的 情 感 或 情 绪 , 例 如 快 乐 、悲 伤 、愤 怒 等 ; 提 供 情 感 标 注 的 标 准 和 情 感 分 类指南 ;
图像场景描述标注 :要求标注人员为图像提供文本描述 , 以捕捉图像中的内容和情境 ; 提供场景描述标注的规则和评估指标 ;
不确定性标注 :处理标注任务中的不 确 定 性 情 况 ,例 如 模 糊 的 对 象 、不 完 整 的 标 注 等 ; 提 供 处 理 不 确 定 性 情况的指导和标注修正规则 ;
图像时间戳标注 :对于动态图像或视频帧 ,标注图像的时间戳或帧数 ;提供时间戳标注的格式和规则 ;
其他
音频
音频类数据标注规则涉及的内容包括 :
语音转写标注 :标注音频中的文字内容 ;
音频分类标注 :标注音频的类型 ,例如音乐 、语音 、环境声等 ;
声音分类标注 :标注音频中出现的声音的类型 ,例如人声 、交通声 、自然声等 ;
音频时间戳标注 :标注音频中每个声音的开始和结束时间 ;
声音强度标注 :标注音频中每个声音的强度 ,例如响度 、音量等 ;
声音频率标注 :标注音频中每个声音的频率 ,例如高音 、低音等 ;
音色标注 :标注音频中每个声音的音色 ,例如清晰 、浑厚等 ;
声音位置标注 :标注音频中每个声音的空间位置 ,例如左声道 、右声道等 ;
声音语速标注 :标注音频中每个声音的语速 ,例如快速 、慢速等 ;
语音情感标注 :标注音频中每个声音所表达的情感 ,例如高兴 、悲伤 、愤怒等 ;
音频节奏标注 :标注音频中的节奏或速度信息 ,例如节奏快慢 、节奏起伏等 ;提供节奏标注的类别和规则 , 以帮助模型理解音频的节奏特征 ;
音频质量标注 :评估音频的质量 ,包括噪声水平 、清晰度 、录制设备等 ;提供音频质量评估的标准和等级 ;
音频语音识别置信度标注 :对于语音识别任务 ,标注识别结果的置信度或可信度 ; 提供识别置信度标注的规则和范围 ;
音频情境标注 :标注音频的上下文或情境信息 , 以帮助模型理解音频的语境和背景 ; 提供情境标注的方法和指导 ;
其他
视频
视频类数据标注规则涉及的内容包括 :
视频分类标注 :标注视频的类型 ,例如电影 、电视剧 、广告等 ;
场景分类标注 :标注视频中的场景类别 ,例如室内 、室外 、城市 、自然等 ;
视频标记标注 :标注视频中的关键帧 ,例如人物出现 、重要情节等 ;
对象分类标注 :标注视频中出现的对象的类别 ,例如车 、树 、人 、建筑等 ;
对象位置标注 :标注视频中出现的对象的位置 ,例如图像的像素坐标 、边界框等 ;
对象数量标注 :标注视频中出现的对象数量 ,例如单个 、多个等 ;
对象属性标注 :标注视频中出现的对象的属性 ,例如颜色 、大小 、形状 、纹理等 ;
视频语义分割标注 :将视频中的像素分割成不同的语义类别 ,如背景 、前景等 ;
视频实例分割标注 :将视频中的不同实例分割开 ,例如对于一段视频中的多个人分别标注 ;
视频情感标注 :标注视频中的情感 ,例如悲伤 、喜悦等 ;
15
GB/T 45674—2025
表 B. 1 人工智能标注任务类型示例 (续)
类别
标注任务类型示例
视频
视频物体运动标注 :标注视频中物体 的 运 动 轨 迹 或 动 作 ,包 括 速 度 、方 向 和 运 动 轨 迹 ; 提 供 运 动 标 注 的 类 别和指导 , 以帮助模型理解物体的运动行为 ;
视频时间戳标注 :标注视频中每一帧或每个关键事件的时间戳 , 以便进行时间相关分析 ; 提供时间戳标注的格式和规则 ;
视频音频标注 :对视频的音频部分进行标注 ,包括音频内容 、语言识别 、情感等 ;提供音频标注的标准和分类指南 ;
视频拍摄角度标注 :标注视频拍摄的 角 度 和 视 角 ,例 如 俯 视 、仰 视 、侧 视 等 ; 提 供 角 度 标 注 的 类 别 和 指 导 , 以帮助模型理解视觉角度 ;
视频特效标注 :对于包含特效 或 后 期 处 理 的 视 频 ,标 注 特 效 类 型 和 应 用 位 置 ; 提 供 特 效 标 注 的 规 则 和 特 效类别 ;
视频中的情感强度标注 :标注视频中 每 个 场 景 或 情 节 的 情 感 强 度 ,例 如 情 感 高 潮 、低 谷 等 ; 提 供 情 感 强 度 标注的标准和强度等级 ;
视频情节描述标注 :要求标注人员为 视 频 提 供 文 本 描 述 ,捕 捉 视 频 中 的 情 节 、事 件 和 动 态 ; 提 供 情 节 描 述 标注的规则和评估指标 ;
视频场景切换标注 :标注视频中场景的切换或转场情况 ,包括过渡类型和时机 ; 提供切换标注的类别和判定准则 ;
视频动画元素标注 :对于动画或特效视频 ,标注其中的动画元素 ,如特殊效果 、角色动作等 ;提供动画元素标注的指导和分类 ;
其他
三维
三维类数据标注规则涉及的内容包括 :
几何形状标注 :根据场景中的几何形 状 对 物 体 进 行 标 注 ,例 如 物 体 的 形 状(如 球 体 、长 方 体 、圆 柱 体 等) 以 及它们的尺寸(如半径 、长度 、宽度等) ;
物体分类标注 :根据物体的外观特征对它们进行分类标注 ,例如标注物体是人 、车 、树 、建筑等不同的类别 ;
位置和坐标标注 :标注物体 在 三 维 空 间 中 的 位 置 和 坐 标 信 息 ,包 括 物 体 的 位 置(如 坐 标 或 相 对 位 置) 、姿 态(如旋转角度) 、偏移量等 ;
遮挡和关系标注 :标注物体之间的遮挡 关 系 以 及 它 们 之 间 的 空 间 关 系 ,例 如 标 注 一 个 物 体 是 否 被 另 一 个 物体遮挡 ,或者两个物体之间的距离 、方向关系等 ;
运动轨迹标注 :如果场景中存在物体的运动 ,可标注物体的运动轨迹 ,包括物体的起始位置 、目标位置 、路径等信息 ;
光照和纹理标注 :标注与光照和纹理有关的信息 ,例如标注物体的表面纹理 、光照条件以及阴影信息等 ;
边界框标注 :标注物体的边界框 , 即包围物体的最小矩形或几何形状 ;
物体属性标注 :标注物体的属性信息 ,如颜色 、材质 、透明度 、反射率等 ;提供物体属性标注的分类和标准 ;
环境标注 :标注三维场景的环境信息 ,包括天空 、地面 、水体等 ;提供环境标注的类别和描述 ;
相机参数标注 :标注相机的参数和设置 ,包括焦距 、光圈 、曝光时间等 ;提供相机参数标注的规则和范围 ;
场景标注 :标注整个三维场景的特征和结构 ,包括场景中的物体分布 、布局 、整体形状等 ;提供场景标注的方法和指导 ;
光源标注 :标注场景中的光源信息 ,包括光源类型 、位置 、强度等 ;提供光源标注的分类和规则 ;
三维模型标注 :如果场景中包含三维模型 ,标注这些模型的外观 、形状 、纹理等特征 ;提供三维模型标注的指南和类别 ;
运动物体标注 :对于运动物体 ,标注它们的轨迹 、速度 、加速度等运动信息 ;提供运动物体标注的规则和数据格式 ;
立体视觉标注 :对于立体图像或 3D场景 ,标注深度信息 、视差图等立体视觉相关数据 ;提供立体视觉标注的方法和标准 ;
遮挡物体标注 :标注哪些物体是遮挡其他物体的 , 以捕捉遮挡关系 ;提供遮挡物体标注的准则和方法 ;其他
16
GB/T 45674—2025
表 B. 1 人工智能标注任务类型示例 (续)
类别
标注任务类型示例
时间序列
时间序列类数据标注规则宜提供明确的标注方法和示例说明 ,规则涉及的内容包括 :
事件检测标注 :标注时间序列数据中的事件 ,包括在时间序列中检测到的关键事件的标记 ,例如突变 、峰 值 、波动或其他特定模式 ;
分类标注 :根据时间序列数据的特征 对 其 进 行 分 类 标 注 ,例 如 标 注 时 间 序 列 数 据 属 于 哪种 类 别 , 如 正 常 、异常 、故障 、周期性等 ;
趋势和周期性标注 :标注时间序列中 的 趋 势 和 周 期 性 模 式 ,包 括 标 注 数 据 的 上 升 趋 势 、下 降 趋 势 、周 期 性 振荡等 ;
阈值和异常标注 :根据预定义的阈值标 注 时 间 序 列 中 的 异 常 值 ,异 常 标 注 可 以 用 于 检 测 和 标 记 时 间 序 列 中的异常点或离群值 ;
相关性和关系标注 :标注时间序列数据之间的相关性或关系 ,例如可以标记时间序列数据之间的相似度 、相关性系数或其他统计指标 ;
预测和回归标注 :标注时间序列数据的 预 测 或 回 归 结
相关推荐
- GB 21346-2022 电解铝和氧化铝单位产品能源消耗限额
- GB/T 33591-2017 智能变电站时间同步系统及设备技术规范
- GB/Z 3480.4-2024 直齿轮和斜齿轮承载能力计算 第4部分:齿面断裂承载能力计算
- GB/T 18856.2-2008 水煤浆试验方法 第2部分: 浓度测定
- GB/T 32588.1-2016 轨道交通 自动化的城市轨道交通(AUGT) 安全要求 第1部分:总则
- GB/T 20063.13-2009 简图用图形符号 第13部分:材料加工装置
- GB/T 42291-2022 压水堆核电厂控制区门窗辐射防护设计准则
- GB/T 40800-2021 铸钢件焊接工艺评定规范
- GB/T 27541-2011 货运缆车技术规范
- GB 55006-2021 钢结构通用规范


