进阶工作流典型工作流范式数据处理
实操范例:搭建去重工作流
在本地对四条样本记录去重,并对照预期结果。
本例在测试项目中使用本地「数据处理」,无需外部能力或源文件。
- 选择「流程 → 开始交付 → 创建空白流程」。如果草稿预置了读取和交付示例节点,先移除它们,再添加「数据处理」。如果保留「目标 / 说明」,从它连到数据处理节点。
- 在「流程 → 启动表单 / 运行输入」中,把默认
topic字段改成名为rows的必填数组。 - 选中数据处理节点,在输入映射中将目标字段
items指向$.run.input.rows。如需通过选择器配置,可在节点的期望输入字段中把items声明为数组。 - 将处理方式设为「去重」,键设为
id,输入来源设为/items,输出名称设为uniqueRows。节点专业参数下的「转换规则 JSON」应包含下列值。
{
"schemaVersion": "raydo.data_transform.v1",
"operation": "dedupe",
"source": "/items",
"key": "id",
"outputKey": "uniqueRows"
}- 使用「审核并发布」,填写发布理由、审批意见和审批人签名,在测试工作区激活流程。
- 选择「启动运行」,选中测试项目,并填入下面的运行输入。
{
"rows": [
{"id": "A01", "name": "Sample A"},
{"id": "A01", "name": "Duplicate A"},
{"id": "B02", "name": "Sample B"},
{"id": "B02", "name": "Duplicate B"}
]
}在「运行与审批」打开数据处理节点的输出。result.uniqueRows 应包含 Sample A 和 Sample B。去重会保留每个键第一次出现的记录。要在下游使用这个数组,连好步骤后映射 $.nodes.<实际数据处理节点 ID>.output.result.uniqueRows。缺失键的记录可能被归为一组,正式使用前先检查上游数据。