AI 生成的数据质量规则怎么验收?把建议写成可执行断言与反例

AI 提出的数据质量规则只有转成确定性的断言并用反例试验,才能纳入数据流水线。示例把金额为正、编号非空且唯一三项建议转成代码。

让 AI 帮忙列数据质量规则很方便,但“订单数据应合理”不能直接验收。规则必须有准确条件、可测反例和失败后动作,才能进入自动化流程。本文用订单金额与编号演示:先把自然语言拆成三条断言,再故意输入错误样本看能否被拒绝。

从建议中提炼可判定条件

人工构造的建议是“订单金额必须为正,订单编号不能为空且不得重复”。代码将其拆为 positive_amount、id_present 和 id_unique。空字符串与真正的缺失值都视为没有编号;金额 0 也不满足“为正”。

AI 生成的数据质量规则怎么验收?把建议写成可执行断言与反例

这些规则适用于本教学场景,不表示所有订单业务都不能出现零元订单。若有试用、赠品或退款,先找业务方确定例外条件和状态,再写代码;让 AI 猜政策会导致误杀数据。

同时运行正例和反例

安装 pandas,将代码保存为 rules_as_tests.py 并运行。valid 应通过;zero_amount 只触发金额规则;duplicate_id 只触发唯一性规则。如果一个反例没有被挡住,规则还不能上线。

import pandas as pd

# “AI建议”是人工构造的候选文本,需转成明确断言后才可使用。
suggestion='订单金额必须为正,订单编号不能为空且不得重复'
def validate(frame):
    return {'positive_amount':bool(frame['amount'].gt(0).all()),
            'id_present':bool(frame['id'].notna().all() and frame['id'].astype(str).str.strip().ne('').all()),
            'id_unique':bool(frame['id'].is_unique)}
good=pd.DataFrame({'id':['a','b'],'amount':[2,3]})
bad_amount=pd.DataFrame({'id':['a','b'],'amount':[2,0]})
bad_duplicate=pd.DataFrame({'id':['a','a'],'amount':[2,3]})
for name,frame in [('valid',good),('zero_amount',bad_amount),('duplicate_id',bad_duplicate)]:
    result=validate(frame)
    print(name,result,'accepted=',all(result.values()))
print('source_suggestion=',suggestion)

看测试结果而不是看 AI 的解释

结果中正常表 accepted=True,两种坏样本均为 False,且失败项与预期一致。下一步把企业真实字段、金额类型及订单状态加入固定测试集;每次改规则都重跑正例和反例,尤其检查以前可接受的边界样本是否被误拒。

valid {'positive_amount': True, 'id_present': True, 'id_unique': True} accepted= True
zero_amount {'positive_amount': False, 'id_present': True, 'id_unique': True} accepted= False
duplicate_id {'positive_amount': True, 'id_present': True, 'id_unique': False} accepted= False
source_suggestion= 订单金额必须为正,订单编号不能为空且不得重复

Python unittest 官方文档给出了将这些断言组织成可重复测试的方式;pandas 重复行文档说明重复检查可针对指定字段或整行,本例要求订单编号唯一。

规则落地前还有哪些缺口

真实流水线应为失败行保存编号、规则版本和原值,阻止错误批次进入下游,并给出修复入口。本例不处理并发写入和跨文件重复;若编号唯一性跨多个批次,应在持久存储层再设唯一约束。

Ai菜鸟网。发布者:AI小管家,转载请注明出处:https://www.alyyhw.com/31709.html

赞 (0)
AI小管家的头像AI小管家
数据标注智能体的结果能直接入库吗?隔离低置信样本并保留复核队列
上一篇 2026年10月1日 下午9:24
表格分析智能体先看什么?生成字段概况、空值率和唯一值检查表
下一篇 2026年10月1日 下午9:24

相关推荐

  • Claude数学建模如何从问题拆解到模型构建

    Claude数学建模的价值,不是直接生成一组看似完整的公式,而是帮助使用者把自然语言问题转换成可分析、可计算、可验证的结构。面对“如何提高效率”“如何合理分配资源”这类表述,第一步应先明确研究对象、决策目标、可用数据、限制条件和最终评价标准。

    11小时前
    200
  • claude教学:从提问到整理资料的AI使用步骤

    Claude更适合承担需要阅读、比较、归纳和改写的工作。面对一份较长的会议记录、调研材料、项目文档或多轮沟通内容,它可以帮助你提炼主题、识别章节结构、抽取关键事实,并将零散信息重新组织成摘要、提纲、表格或行动清单。它也适合用于邮件改写、报告初稿、问答整理和不同语气之间的转换。

    11小时前
    300
  • claude数学能解决哪些题型?从提问到验算的使用指南

    claude数学更适合被当作一个会解释、会追问、能协助检查的数学助手,而不是只负责吐出最终数字的计算器。它可以帮助用户读懂题意、整理已知条件、选择公式、展示推导步骤,也能根据用户提供的解答寻找计算或逻辑上的漏洞。

    11小时前
    200
  • claude教科书中的AI对话使用场景与操作步骤

    本文把“claude教科书”作为学习AI对话方法的主题表达,不把未提供的书籍章节、作者观点、官方功能或具体版本当作已知事实。真正值得掌握的,不是背下一句所谓万能提示词,而是建立一套可重复的对话流程:先明确目标,再补充背景,随后规定输出方式,最后检查结果。

    11小时前
    200
  • claude数学公式怎么用 从文字描述到规范公式的操作步骤

    使用Claude处理数学公式,关键不是直接输入“帮我写公式”,而是把题意中的变量、条件、运算关系和输出格式交代清楚。自然语言往往省略主语、范围或单位,如果这些信息没有说明,生成结果就可能在符号定义、括号范围或等号两侧的逻辑上出现偏差。

    11小时前
    200
联系我们

联系我们

1

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
关注微信
分享本页
返回顶部