去重

1. 概述

• 定义：对数据表中的重复数据只保留一条，其余进行删除。

• 场景：当数据存在重复，可以使用去重节点，将相同的重复数据根据一定的排序规则，截取前n条数据。比如，希望取个每个员工，每个月每个客户最后一次拜访的数据。

2. 配置

• 可以设置去重依据、排序依据、截取数据前几条；
• 去重依据字段值完全相同的重复数据，将会根据设置的排序规则顺序，保留前N条数据。