有没有做过datax自定义transformer,实现数据去重的功能

有没有做过datax 自定义transformer 实现数据去重的功能

jdk8中可以用lambda表达式去重哦。