自助ETL中，如何对多列组合做去重？

有一张订单明细表，因为业务系统原因会有重复记录（同一个订单ID可能会重复出现多次），但重复的判断依据需要基于“订单ID + 商品编码 + 下单日期”三列组合来判断，单靠订单ID不行（同一订单有多个商品）。

在自助ETL中找到了“去重行”节点，但好像只能指定一个字段作为去重依据。

想问一下：

1. 
   

   “去重行”节点支持多列组合去重吗？如果不支持，有其他节点可以实现吗？

   
   


2. 
   

   如果有重复记录，去重时是保留第一行还是最后一行？这个可以控制吗？

   
   


3. 
   

   有没有办法在去重前先按某个字段排序，确保保留的是最新的一条记录？

   
   

可以的，你将需要去重的字段选择好到右边，他就是按照多列组合去重的。但好像并不能控制保留哪一行的，你可以看看节点的介绍
https://wiki.smartbi.com.cn/page ... on?pageId=111759675