数据质量
空值检查
规则类型
选择校验的规则类型，支持选择“全表校验”和“选择字段校验”两种规则。全表校验：对数据表全部字段进行校验，即对全部数据进行校验； 选择字段校验：对数据表中用户选择的字段进行校验，只校验该字段下的值，可理解为表格中列的概念。当选择此种规则校验时，系统会自动带出字段“校验字段”，以供用户选择。
选择校验的规则类型，支持选择“全表校验”和“选择字段校验”两种规则。
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
进入算法中心，点击“新建”，进入算子流配置 页面。
操作二
点击画布自动带出的“数据输入”算子，打开配置页面，选择本地上传文件或从数据网盘引用数据，输入表格附件《培训考试分数》。
操作三
从算子选择区将“空值检查”算子拖拽至画布区，与“数据输入”算子连接。
操作四
点击“空值检查”算子，打开算子配置区。规则类型选择“选择字段校验”，校验字段选择“主观题分数”“客观题分数”“课堂表现得分”和“最终成绩”四个字段，校验等级选择为“严重”，校验不通过提示输入为“存在数据缺失！”，点击“保存配置”。
操作五
保存并执行算子流，在数据预览区查看算子流运算结果和质量检查结果。
重复唯一值检查
规则类型
支持选择“重复值检查”和“唯一值检查”两种数据校验类型。重复值检查：对指定字段或字段组合，进行数据重复性检查； 唯一值检查：对指定字段或字段组合，进行数据唯一性检查。
支持选择“重复值检查”和“唯一值检查”两种数据校验类型。
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
进入算法中心，点击“新建”，进入算子流配置页面。
操作二
点击画布自动带出的“数据输入”算子，打开配置页面，选择本地上传文件或从数据网盘引用数据，输入表格附件《培训考试分数》。
操作三
从算子选择区将“空值检查”算子拖拽至画布区，与“数 据输入”算子连接。
操作四
点击“重复值检查”算子，打开算子配置区。规则类型选择“重复值检查”，校验字段选择字段“姓名”，校验等级选择为“严重”，校验不通过提示输入为“存在重复数据！”，点击“保存配置”。
操作五
保存并执行算子流，在数据预览区查看算子流运算 结果和质量检查结果。
逻辑检查
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
校验条件
选择字段校验方式，支持选择“字段间简单逻辑校验”和“条件校验”两种校验方式。字段间简单逻辑校验：该方式支持输入逻辑表达式，对数值或日期格式的字段进行简单逻辑校验，如总价=单价*数量、A=B等，不符合逻辑表达式的数据会被标识为逻辑校验未通过。支持新增多个逻辑表达式，各表达式之间是“且”的关系。 条件校验：选择该校验方式，可配置校验规则，对数据进行筛选，符合 校验规则的数据会被标识为逻辑校验未通过。可配置多个校验条件，支持在校验条件间设置“且”“或”两种关系：点击
，增加“且”关系的校验条件；点击
，增加“或”关系的校验条件。
选择字段校验方式，支持选择“字段间简单逻辑校验”和“条件校验”两种校验方式。
逻辑表达式
选择。校验条件为“字段间简单逻辑校验”时自动带出该字段。输入逻辑表达式时，可使用+-*/校验数值型字段逻辑，>、< 、>=、 < =、 = 校验数值型和日期型字段逻辑。
选择。校验条件为“字段间简单逻辑校验”时自动带出该字段。输入逻辑表达式时，可使用+-*/校验数值型字段逻辑，>、< 、>=、 < =、 = 校验数值型和日期型字段逻辑。
配置参数
选择校验条件为“条件校验”时自动带出该字段。配置校验条件的字段说明如下：字段：选择校验字段； 数据类型：选择与校验字段对比的值，支持选择三种类型的数值，包括字段、字典表和自定义： 字段可用于设置对比字段，检查校验字段和对比字段之间等于或不等于的关系； 字典表可引用数据网盘的数据表，检查校验字段与所选字典表的字段之间等于或不等于的关系； 自定义：可设置自定义数值，校验字段与自定义值之间的多种关系； 字典表：当对比数据的数据类型为“字典表”时，可点击该按钮引用数据网盘的表，作为对比使用的字典表，点击
可引用多张字典表； 字段类型：当校验字段为文本类型的字段，且对比数据的数据类型选择“自定义”时，可在此处设置校验字段的字段类型，同时影响自定义值的类型； 条件：选择对比条件，如等于、不等于等，所选择对比数据的数据类型不同，可选择的条件不同； 表名：根据选择的字典表自动带出； 值：根据对比数据的数据类型，选择字段、字典表的字段或输入自定义值。当数据类型是自定义值时，既可手动输入对比数据，也可引用参数作为对比数据。
选择校验条件为“条件校验”时自动带出该字段。配置校验条件的字段说明如下：
1.
2.
3.
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
进入算法中心，点击“新建”，进入算子流配置页面。
操作二
点击画布自动带出的“数据输入”算子，打开 算子配置区，选择本地上传文件或从数据网盘引用数据，输入表格附件《培训考试分数》，将“主观题分数”“客观题分数”“课堂表现得分”和“最终成绩”四个字段的目标类型修改为“数值”类型。
操作三
从算子选择区将两个“逻辑检查”算子拖拽至画布区，均与“数据输入”算子连接。
操作四
点击第一个“逻辑检查”算子，打开算子配置区。校验字段选择“最终成绩（满分100）”，校验条件选择“字段间简单逻辑检验”，点击“逻辑表达式”，双击选择字段及运算符号，输入“主观题分数(满分50)+客观题分数(满分30)+课堂表现得分(满分20)=最终成绩(满分100)”，校验等级选择“严重”，校验不通过提示输入为“考试分数计算有误！”，点击“保存配置”。
操作五
点击第二个“逻辑检查”算子，打开配置区。校验字段选择“最终成绩（满分100）”，校验条件选择“条件校验”，配置参数设置为“字段‘最终成绩（满分100）’－数据类型‘自定义’－条件‘小于’-值‘60’”，校验不 通过提示输入为“考试分数低于60分”，点击“保存配置”。
操作六
保存并执行算子流，在数据预览区查看算子流运算结果和质量检查结果。
值域检查
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
校验条件
选择校验内容和校验方式，各校验条件说明如下：枚举值：可以校验字段的值是否是少量固定值之一，例如校验员工学历字段下的值是否是中专、大专、本科、研究生之一，支持选择“精准校验”和“模糊校验”两个校验方式： 精准校验：校验严格，如定义值为“笔”时，数据中除了“笔”之外的数据均无法通过校验。 模糊校验：校验宽松，可根据定义值进行模糊匹配，如定义值为“笔”，数据中“圆珠笔”“签字表”“毛笔”等包含该字符的数据都是正确数据，不包含“笔”的数据仍无法通过校验。 字典表：与枚举值校验逻辑相同，但可以校验大量固定值，也支持选择“精准校验”和“模糊校验”两种形式； 数值范围校验：可以校验数值类型的数据是否处于指定数值范围中； 日期范围校验：可以校验日期类型的数据是否处于指定数值范围中。
选择校验内容和校验方式，各校验条件说明如下：
1.
2.
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
新建算子流画布，将画布重命名为“值域检查”，点击“保存”，将算子流保存至“新云汽车算子”文件夹内。
操作二
通过“数据输入”算子将附件Excel文件《质量检查分数》输入。
操作三
从算子选择区将“字段选择”算子拖拽至画布区，连接“字段选择”算子与“数据输入”算子。
操作四
点击“字段选择”算子，将所有的分数字段格式修改为数值，点击“保存配置”。
操作五
从算子选择区将“值域检查”算子拖拽至画布区，连接“值域检查”算子与“字段选择”算子。
操作六
点击“值域检查”算子，在“校验字段”处选择“课堂表现得分（满分20）”，在“校验条件”中选择“数值范围校验”，数值范围小数位数为“0”，数值范围为“左开右闭”，最小值为0，最大值为20，在“校验不通过提示”中输入“值域检查不通过字段数”，点击“保存配置”。
操作七
点击“执行”，执行算子流，在数据预览区查看算子流运算结果和质量检验结果。
格式检查
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
校 验条件
选择校验内容和校验方式，各校验条件说明如下：日期类型：支持选择校验字段类型和校验内容。其中校验字段类型是校验字段的目标类型是否为日期时间类型，校验内容是校验日期字段的内容是否符合要求的格式，支持选择多种格式，例如YYYY-MM-DD、YYYY-MM-DD HH:MM:ss等； 字符类型：支持校验所选字段的目标类型是否为文本类型，同时可对所选字段的字符长度进行校验； 数值类型：支持校验所选字段的目标类型是否为数值类型，可选择校验字段类型和校验内容。其中校验字段类型是校验字段的目标类型，校验内容是校验数值字段的小数位； 特殊字符校验：校验所选字段数据是否包含特殊字符，包括[`~!#$%^&()_\+=< > ?:"{}| ~ ! #%……& （）={}|《》？：“”【】、；‘’，。、\s+]）等字符。 布尔类型：布尔类型是一种只有两个值的数据类型，分别表示真和假。选择该校验条件，会校验所选字段的值是否为TURE或者FALSE； 手机格式：校验所选字段值是否为手机号码格式； 邮箱格式：校验所选字段值是否为邮件格式； 身份证号：校验所选字段值是否为身份证号格式； IP地址：校验所选字段值是否为IP地址格式； 自定义正则表达式：正则表达式是一种文本模式，可以用来描述和匹配字符串的特定模，用于模式匹配和搜索文本的工具。它类似于excel查找中的通配符，可用来匹配、检索和替换符合某个模式（规则）的文本，例如表达式“^.{3,20}$”可用于校验字符长度是否介于3-20之间。
选择校验内容和校验方式，各校验条件说明如下：
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
新建算子流画布，将画布重命名为“格式检查”，点击“保存”，将算子流保存至“新云汽车算子”文件夹内。
操作二
通过“数据输入”算子将附件Excel文件《质量检查分数》输入。
操作三
从算子选择区将“格式检查”算子拖拽至画布区，连接“格式检查”算子与“数据输入”算子。
操作四
点击“格式检查”算子，在“校验字段”处选择“最终成绩（满分100）”，校验条件选择“数值类型”，在“配置参数”选择“校验内容”，小数位数为“0”，在“校验不通过提示”中输入“格式不通过字段数”，点击“保存配置”。
操作五
点击“执行”，执行算子流，在数据预览区查看算子流运算结果和质量检查结果。
波动率检查
校验字段
选择需要校验的字段，支持同时选择多个字段。
选择需要校验的字段，支持同时选择多个字段。
配置参数
设置波动率校验标准值和范围，详细配置说明如下：基准值：设置计算波动率的基准值； 波动率标准值：设置比较波动率是否超出标准的数值； 比较符号：支持以下比较符号，包括>, < ,>=,=和!=。
设置波动率校验标准值和范围，详细配置说明如下：
校验等级
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
设置该算子识别出的质量问题的严重等级，支持设置“严重”和“一般”两类等级，后续可在数据预览区和质量报告（需配置数据质量容器算子）中查看。
校验不通过提示
设置质量问题提示语，该提示语设置后可在数据预览区查看。
设置质量问题提示语，该提示语设置后可在数据预览区查看。
快速任务
操作指引
操作一
新建算子流画布，将画布重命名为“波动率检查”，点击“保存”，将算子流保存至“新云汽车算子”文件夹内。
操作二
通过“数据输入”算子将附件Excel文件《产品质量校验表》输入，并将字段“桌板厚度”“桌板长度”和“桌板宽度”目标类型修改为“数值”。
操作三
从算子选择区将“波动率检查”算子拖拽至画布区，与“数据输入”算子连接。
操作四
点击“波动率检查”算子，“校验字段”选择“桌板厚度”，在“配置参数”中输入“10”，在“波动率标准值”输入“5”，比较符号为“＜”，校验等级选择“严重”，“校验不通过提示”输入为“桌板厚度质量校验不达标”，点击“保存配置”。
操作五
点击“执行”，执行算子流，在数据预览区查看算子流运算结果及产品质量检查结果。
数据质量容器
规则
选择发布数据校验规则或者服用校验规则。配置规则：将该数据质量容器算子配置好的算子组合作为校验规则，以供其他算子流引用； 复用规则：引用其他数据质量容器算子配置好的校验规则。
选择发布数据校验规则或者服用校验规则。
发布规则
可打开发布规则界面，选择发布规则至哪条算子流及查看发布记录。首次配置好的数据质量容器无需发布，其他算子流的数据质量容器算子也可复用规则。发布：将规则发布至指定的算子流； 发布至全部算子流：将规则发布至全部的算子流； 发布记录：查看规则发布记录； 算子流查看界面：可以查看已经复用该数据质量容器算子发布的规则的算子流。
可打开发布规则界面，选择发布规则至哪条算子流及查看发布记录。首次配置好的数据质量容器无需发布，其他算子流的数据质量容器算子也可复用规则。
选择复用规则
选择复用哪条算子流的校验规则。
选择复用哪条算子流的校验规则。
更新规则
获取复用规则的最新的规则配置，并覆盖现有规则。
获取复用规则的最新的规则配置，并覆盖现有规则。
输出校验结果列
勾选后，质量校验结果中会新增一列数据，用于展示该行中质量校验不通过的字段及提示。列名支持用户自定义配置。
勾选后，质量校验结果中会新增一列数据，用于展示该行中质量校验不通过的字段及提示。列名支持用户自定义配置。
快速任务
操作指引
操作一
进入算法中心，点击“新建”，进入算子流配置页面。
操作二
点击画布自动带出的“数据输入”算子，打开配置页面，选择本地上传文件或从数据网盘引用数据，输入表格附件《财务部员工信息表》。
操作三
从算子选择区将“数据质量容器”算子拖拽至画布区，与“数据输入”算子连接。
操作四
从算子选择区将“空值检查”算子拖拽入数据质量容器，点击“空值检查”算子，打开算子配置区。规则类型选择“全表校验”，校验等级选择为“严重”，校验不通过提示输入为“存在数据缺失！”，点击“保存配置”。
操作五
从算子选择区将“格式检查”算子拖拽入数据质量容器，与“空值检查”算子连接。点击“格式检查”算子，打开算子配置区。校验字段选择除“序号”“工号”和“电子邮箱地址”以外的全部字段，校验条件选择“特殊字符校验”，校验等级选择“一般”，校验不通过提示输入为“数据中存在特殊字符！”，点击“保存配置”。
操作六
点击“数据质量容器”算子，打开算子配置区。容器名称修改为“财务部员工信息表数据校验结果”，规则选择“配置规则”，保存校验结果选择“我的数据”文件夹，不勾选输出校验结果列。
操作七
保存并执行算子流，在数据预览区查看算子流运算结果及产品质量检查结果。
操作八
进入数据网盘，打开“我的数据”文件夹，查看保存的数据质量校验结果。
注意事项