我们如何定义医疗高质量数据集——从质量属性到价值证据的完整框架
不是再造一组口号,而是建立能够指导建设、约束使用并支持验收的质量论证链
如果任何经过清洗、脱敏和标注的数据都可以被称为“高质量数据集”,那么“高质量”最终只会成为一个无法验收的形容词。
一套数据拥有十万病例、上千字段,完整率超过95%,是否就是高质量?未必。病例规模大,可能仍然不代表目标人群;字段填得满,可能仍然存在错误时序;专家标注一致,可能仍然缺少可靠参考依据;模型指标提高,也可能来自泄漏、偏差或对同一评测集的反复调优。
反过来,一套规模并不庞大的数据,如果任务定义清楚、临床语义可靠、病例构成与目标场景匹配,且能够用独立、可复核的证据说明其价值,对特定任务而言,可能比未经任务化组织的海量数据更接近“高质量”。
前两篇文章分别讨论了医疗数据为什么很多但高质量数据集仍然稀缺,以及数据库、数据资源、训练数据、评测数据和数据产品之间的差别。继续向前一步,行业绕不开一个更基础的问题:究竟满足什么条件,一套医疗数据集才有资格被称为高质量?
“高质量数据集”不是一个参与方单独定义就能成立的概念。信息部门可能关注字段完整和系统一致,临床专家关注医学事实与病例代表性,算法团队关注模型学习价值,评测方关注独立性和参考标准,采购与验收方则需要判断交付物是否能够被理解、复核和持续管理。
这些要求都重要,但任何单一要求都不能构成完整定义。一个真正有用的定义,至少要完成三件事:建设时能够说明该做什么,使用时能够约束结论如何解释,验收时能够明确质量由什么证据支持。
核心判断
高质量不是数据本身拥有的一枚永久勋章,而是数据在特定用途、场景和时间范围内,经证据支持的一项质量结论。
国家数据局2026年发布的实施方案已经把结构完整性、内容多样性、标注准确性、模型适配性和AI-Ready纳入建设要求,并提出“数据质量验证+模型应用反馈”以及覆盖采集、清洗、加工、标注、质检、测评、迭代和审计的全生命周期管理。政策逻辑正在从“汇聚了多少数据”转向“数据能否适配场景、产生效果并持续受控”。[1]
同年公开的《高质量数据集质量评测规范》征求意见稿,尝试从说明文档、数据质量和模型应用三个维度开展评测。需要特别说明:截至2026年9月3日,全国标准信息公共服务平台仍将其列为推荐性国家标准项目,公开可查文本为2026年4月发布的征求意见稿,尚不能作为已经发布实施的国家标准引用;但它反映了一个重要方向——高质量不能只由数据内部指标证明,还要有完整说明和应用证据。[2][3]
目前,并不存在一项已经生效、覆盖医疗临床、科研、管理和各类人工智能用途的统一“医疗高质量数据集”国家定义。因此,下面给出的不是官方标准,而是基于医疗数据和医疗AI实践提出的一项工作定义,用于形成可以讨论、建设和验收的共同语言。
工作定义
医疗高质量数据集,是在合法合规、伦理适当、安全可控和责任主体明确的前提下,围绕明确的临床、科研、管理或人工智能用途,对目标人群、使用环境、任务角色和适用边界作出清晰界定,将来源明确的医疗数据进行任务化组织,并在适用时开展样本构建、医学语义组织、标注或参考标准建立和质量控制;以与预期用途、风险水平和质量声明相匹配的证据,证明其关键质量属性、医学可信度及用途适用性,同时配套完整的数据说明、处理谱系、质量报告、限制声明、版本记录和持续治理机制,从而具备在授权边界内被规范使用、复核,并按照明确依据验收的条件。
这一定义的重点不是增加更多术语,而是建立一条质量论证链:先确认数据是否有资格进入项目,再明确它为谁、在何处、承担什么任务;随后识别与用途相关的质量属性,用相匹配的证据证明这些属性,并说明结论可以外推到哪里;最后通过版本、监测、更新和退役机制持续维护这项质量判断。
本文所说的“价值证据”,首先是与预期用途相匹配的适用性证据,例如训练效用、评测有效性、研究可复现性或知识检索可靠性;除非经过专门研究,它不等同于临床获益、经济回报、产品安全有效性或监管认可。
更简洁地说:医疗高质量数据集,是在明确用途与边界内,其适用性已经得到充分、可审查证据支持,并能够在全生命周期中持续维护的数据产品。
这里的“充分”不是一个适用于所有项目的固定数值。用于早期算法探索、内部模型选型、多中心性能验证和高风险临床决策支持的数据,不应接受完全相同的证据要求。用途风险越高、质量声明越广,所需证据就应越强。

图1|医疗高质量数据集的六层质量论证框架
成立前提不是高质量的加分项,而是进入质量评价之前必须跨过的门槛。医疗数据来源敏感、用途复杂,一套数据即使在技术上可以被提取,也不代表可以脱离原有目的、授权和管理边界被任意加工或使用。
·责任主体:谁决定处理目的、谁实施加工、谁管理使用和安全责任,具有明确安排。
·合法基础与授权:数据取得、加工、共享和使用具有与项目相匹配的依据、授权范围和管理程序。
·伦理适当:涉及人的研究、敏感场景或高风险用途时,满足适用的伦理审查和管理要求。
·安全可控:访问、存储、传输、使用和退出过程具有与风险相称的安全措施和权限控制。
《个人信息保护法》将医疗健康信息列为敏感个人信息,要求具有特定目的、充分必要性并采取严格保护措施。对医疗数据集而言,这意味着“完成脱敏”不能被简单理解为可以无限制使用;去标识化也不能当然等同于法律意义上的匿名化。[7]
合规决定数据能否进入项目,质量决定数据能否胜任任务,证据决定质量结论能否被相信。
反过来,合规也不等于高质量。一套数据可以在管理程序上完全合规,却仍然因为目标人群不匹配、标签依据不足、样本关联错误或信息泄漏,而无法胜任目标任务。成立前提与质量判断必须同时存在,但不能相互替代。
严格来说,不应只问“这是不是一套高质量数据集”,而应继续追问:“相对于什么用途、什么人群、什么环境和什么质量声明,它被认为是高质量的?”
这里可以引入一个关键概念:质量声明。质量声明是建设方或使用方对数据能够承担何种功能所作出的明确主张,例如适合训练某一专病辅助识别模型、适合评价模型在某类医院中的性能、适合支持某种回顾性研究,或者适合作为持续更新的医学知识检索来源。
·任务:解决什么临床、科研、管理或模型问题,输入和输出分别是什么。
·对象:目标患者、疾病阶段、机构、科室、设备和数据模态是什么。
·时点:模型或分析在何时作出判断,当时真实可获得哪些信息。
·角色:数据用于预训练、监督训练、调优、内部验证、独立评测、科研分析还是知识检索。
·边界:哪些人群、时间、地域、机构、设备和用途没有得到证据支持。
一套来自单中心三甲医院的胸部CT数据,可以在来源医院和特定设备条件下构成有价值的训练数据;如果没有相应证据,就不能自然声称它代表基层医院、其他地区或不同扫描协议下的患者。边界不是削弱价值,而是防止价值被错误外推。
高质量数据集不需要证明自己“什么都能做”,而需要准确说明自己“能够可靠地做什么”。
质量属性回答的是“应该关注什么”。它不是一张可以脱离场景机械打分的固定清单,而是一组需要围绕用途和风险进行选择、定义和验证的质量维度。对于医疗数据,可以至少从四个相互关联的方面理解。
这一组属性关注数据是否忠实反映其来源,数据内部关系是否成立,包括来源真实性、关键事件完整程度、重复和冲突识别、单位与编码一致性,以及患者、就诊、检查、标本、病灶和结局之间的关联是否正确。
医疗数据中的“完整”并不是字段填满率越高越好,而是与任务相关的信息是否足以支持样本成立。有些缺失反映真实临床流程,甚至携带选择行为和疾病严重程度信息。如果不加判断地填补或删除,数据可能更加整齐,却更远离真实使用环境。
数据被模型读取之前,必须先被正确解释。诊断编码、病历文本、检验结果、影像判断、病理结论、长期随访和专家共识,可能指向不同层次的医学事实,不能统一压缩成一个来源不明的“金标准”。
这一属性的目标状态,是医学概念清晰、时间语义一致、参考依据与任务相匹配,并能够恰当表达不确定性。专家一致性高,只能说明不同专家给出了相似判断,不能单独证明判断一定正确;其证据来源、复核方式和争议处理,应在后续证据层中单独说明。
代表性必须相对于目标人群和质量声明评价。需要关注年龄、性别、疾病阶段和关键亚组,也要关注医院层级、地区、设备、采集协议、诊疗流程和数据时间跨度。多中心只是增加来源数量,并不自动意味着能够代表未来使用人群。
代表性也不是简单追求“越接近自然分布越好”。训练数据可以为了提高学习效率适当富集少数类别;用于估计真实场景性能的评测集,需要与目标使用环境匹配;压力测试集则可以集中覆盖罕见、高风险和极端案例。关键在于数据构成与其角色一致。
一套数据医学上真实,也不一定适合目标模型或分析任务。还要确认输入信息在使用时点真实可得,标签与预测目标之间不存在隐蔽泄漏,样本粒度、格式和模态能够支持任务,训练样本具有可学习信号,评测病例能够区分模型真实能力,接口和元数据可以支撑稳定复用。
在人工智能医疗器械场景中,现行推荐性行业标准YY/T 1833.2-2022提出数据集说明文档、十七种质量特性以及抽样检验、操作检查、文档检查等评价方式,为质量验收和第三方评价提供依据。它的重要价值在于把数据集从“文件集合”变成可描述、可评价的技术资源;但其适用范围是人工智能医疗器械相关数据集,不能扩大为所有医疗数据项目的统一强制标准。[4]
属性清单只能告诉我们要评价什么,不能证明数据已经达到高质量。要让质量从自我声明变成可以复核的结论,属性、证据和边界必须一一对应。
质量属性告诉我们需要评价什么;验证证据回答凭什么相信;适用边界说明这份相信可以延伸到哪里。
用于说明数据从哪里来、如何被选择、加工和形成,包括来源说明、队列形成过程、处理谱系、规则版本、质量控制记录和变更记录。它证明的是建设过程可以被追溯,而不是依赖项目人员的口头解释。
用于描述完整性、一致性、异常、重复、缺失机制、分布、亚组覆盖、时间变化和机构差异。统计分析不应只生成一个笼统总分,而应说明哪些属性满足用途要求、哪些限制仍然存在,以及这些限制会影响什么结论。
用于说明标签、参考标准和医学语义为什么可信,包括证据来源、专家构成、复核方式、争议处理和不确定性分析。医疗数据不应为了追求整齐而隐藏分歧;能够识别并呈现不确定性,本身就是质量的一部分。
用于说明数据能否实现预期用途。训练数据可以通过学习曲线、对照实验、错误分析和跨数据验证等方式评价学习价值;评测数据需要通过独立性审查、参考标准验证、亚组分析、统计不确定性以及必要的时间外或机构外验证证明测量价值;科研数据关注队列可解释性、偏倚与复现;知识数据关注来源权威性、时效性和检索可追溯性。
这里必须避免循环论证:某一模型在某次实验中取得更高指标,只能支持与该模型、任务和实验设计相匹配的有限结论。它不能永久证明数据在所有模型和场景下都高质量,更不能自动证明临床安全性、有效性或患者获益。
证据的强度必须与质量声明的强度相匹配;证据只能支持它实际检验过的结论。
IMDRF在2025年发布的人工智能医疗器械良好机器学习实践终版原则中,强调预期用途、目标患者与环境代表性、训练集和测试集的适当独立、与用途相匹配的参考标准、临床相关条件下的测试以及部署后监测。这些原则不是中国强制法规,但为“用途—数据—证据—持续监测”如何闭环提供了有价值的国际参照。[6]
医疗知识、疾病谱、设备、编码体系、诊疗流程、数据来源和应用环境都会变化。即使文件本身没有变化,数据的证据价值也可能因为使用方式发生变化。
·版本一致:数据主体、标签、说明文档、质量报告和适用边界使用同一版本标识。
·变更可解释:新增、删除、重标注、重新切分或规则修改都说明改变了什么、为什么改变。
·影响可评估:变更对数据分布、亚组覆盖、泄漏风险和既有质量结论的影响得到评估。
·状态可监测:持续识别知识更新、数据漂移、机构流程变化和新出现的错误模式。
·用途可重审:目标人群、使用环境或数据角色发生变化时,重新评价适用性。
·退出有安排:数据不再适用、评测集被污染或授权条件变化时,能够限制使用、替换或退役。
尤其是评测数据,一旦被公开传播、用于模型训练、提示优化或反复针对性调参,其独立性和区分能力就可能下降。此时,即使数据文件没有修改,原来的评测结论也不应被无限期沿用。
数据没有变化,不代表质量状态没有变化;用途、知识和外部环境同样会改变数据的证据价值。
国家卫生健康委等部门提出建立医疗大模型应用评测验证,并从医疗质量安全、个人隐私和数据安全等方面开展动态监测。这说明医疗AI的数据供给、应用验证与持续治理正在被放入同一条责任链,而不是在数据交付后彼此分离。[5]
用途边界负责确定数据承担什么角色;分用途校准则根据这一角色,反向配置核心属性的重点、验证证据的强度和生命周期治理要求。它不是第五层之后的最后一步,也不是更高一级的数据状态,而是贯穿前述框架的横向校准机制。
不同数据角色共享一些基础要求,但质量重心和证据结构并不相同。把所有用途压缩为一张通用评分表,容易让真正关键的问题被平均分掩盖。
重点关注规模与多样性、来源谱系、重复与污染、医学内容覆盖、隐私风险及不同来源之间的结构差异。这类数据不一定要求每个样本都有精细标签,但必须能够说明内容构成、来源边界和已知风险。
重点关注任务定义、输入输出匹配、标签可靠性、少数类别与难例覆盖、信息泄漏和样本学习价值。数据可以适度富集或平衡,但必须说明与真实应用分布之间的差异。
重点关注评价目的、数据独立性、目标人群与环境匹配、参考标准、评分规则、亚组表现、高风险错误和统计不确定性。评测数据的核心不是帮助模型获得更高分,而是可靠发现能力、风险和适用边界。
重点关注队列定义、暴露与结局测量、时间关系、选择偏倚、混杂因素、失访、缺失机制和研究可复现性。适合模型训练的数据,不一定满足临床研究的统计推断或因果解释要求。
重点关注来源权威性、知识时效性、文档版本、内容粒度、术语一致、证据层级、矛盾信息处理和检索结果可追溯性。知识内容即使曾经正确,如果已经过时、无法追溯或脱离适用人群,也可能导致错误使用。
训练数据要证明“可学”,评测数据要证明“可测”,科研数据要证明“可解释、可复现”,知识数据要证明“有依据、不过时、可追溯”。用途不同,高质量的证据结构也不同。
成立前提、用途边界、核心质量属性、验证证据、生命周期治理和分用途校准,不是六个可以简单相加的分项,也不应被压缩成一个脱离场景的总分。
一套成熟的医疗高质量数据集,真正交付的应当包括数据主体、任务和语义说明、来源与加工谱系、标签或参考依据、质量与价值验证证据、适用范围与已知限制,以及版本和持续治理记录。这些组成共同回答使用方最关心的问题:拿到的是什么、为什么能够使用、可以支持什么结论、出现变化后如何继续管理。
因此,“高质量”不应是建设方写在项目名称里的自我声明,而应是一项能够被第三方审查、被使用方复核、被验收方确认,并在边界变化后重新评价的结论。
医疗高质量数据集交付的不只是一批数据,还包括一项能够被审查、被限定边界并持续维护的质量结论,以及支持该结论的说明、证据和治理记录。
定义医疗高质量数据集,不是为了创造一个更复杂的概念,而是为了建立医院、临床专家、数据团队、模型团队和验收方之间共同使用的质量语言。
对医院而言,它决定业务记录能否被转化为科研和人工智能可用的数据资产;对医疗AI企业而言,它决定模型究竟学习了什么,评测结果能够支持多大范围的结论;对科研和评测机构而言,它决定研究是否可复现、比较是否公平、结论是否具有外部有效性;对治理团队而言,它把质量控制从字段和文件扩展到语义、证据、边界和版本演化。
真正成熟的定义,既要告诉建设者应该做什么,也要告诉使用者可以相信什么,还要告诉验收者依据什么作出判断。
如果正在建设或使用一套医疗数据集,可以先暂时删掉项目材料中的“高质量”三个字,再回答下面五个问题:
1. 数据集服务于哪个明确任务、目标人群和使用环境?
2. 关键医学语义、标签或参考结论由什么证据支持?
3. 代表性、偏倚、泄漏和高风险亚组是否经过分析?
4. 训练、评测和应用验证之间是否保持与结论相匹配的独立性?
5. 交付时能否同时提供质量证据、适用边界、版本记录和持续治理安排?
如果不同参与方给出的答案并不一致,项目当前最需要补充的,可能不是更多数据,而是对“什么才算建成”的共同定义。也欢迎在留言区留下最难回答的一个问题;请勿发送病例、影像或任何可识别患者的信息。
专题衔接
上一篇:《从数据库到数据产品:医疗高质量数据集究竟“高”在哪里?》
下篇预告
下一篇:《标注不是贴标签:临床知识如何真正进入数据集?》
1. 国家数据局:《关于推进行业高质量数据集建设行动的实施方案》。2026年6月发布;提出结构完整性、内容多样性、标注准确性、模型适配性、应用反馈和全生命周期管理。
2. 全国数标委:关于征求《高质量数据集质量评测规范》等国家标准意见的通知。2026年4月公开征求意见;相关文本仍为征求意见稿,不是现行国家标准。
3. 全国标准信息公共服务平台:《高质量数据集质量评测规范》国家标准项目。截至2026年9月3日,公开状态仍为国家标准项目。
4. 中国食品药品检定研究院:YY/T 1833.2-2022标准解读。适用于人工智能医疗器械相关数据集;介绍说明文档、十七种质量特性及评价方法。
5.国家卫生健康委:《关于促进和规范“人工智能+医疗卫生”应用发展的实施意见》。提出建设高质量数据集、建立医疗大模型应用评测验证并加强动态监测。
6.IMDRF:Good machine learning practice for medical device development: Guiding principles。IMDRF/AIML WG/N88 FINAL:2025;涉及预期用途、代表性、训练/测试独立、参考标准及持续监测。
7.《中华人民共和国个人信息保护法》。医疗健康信息属于敏感个人信息;相关处理应满足适用法律要求。
说明|本文提出的是面向医疗数据集建设实践的工作定义与开放框架,不替代适用的法律法规、伦理要求、国家标准、行业标准、监管审评或具体项目的专业判断。
免责声明:
智慧医疗网转载其他网站内容,出于传递更多信息而非盈利之目的,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
本平台所发布信息的内容和准确性由提供消息的原单位或组织独立承担完全责任!
凡来源注明智慧医疗网的内容为智慧医疗网原创,转载需获授权。