使用EmEditor优化列数据中的排序/去重复多元素

问题描述

在处理大型带分隔符的文件时，当前最简单的方式是通过/来对列中的元素进行排序/去重复（通常用分号分隔，但可以是任何字符）。 “拆分列方法” document.SplitColumn，然后使用组合线方法document.CombineLines重新组合在一起（根据需要使用相关的方法参数进行排序/去重复）。

当文件不是很大时，这种方法行得通，但是我想知道是否存在更快/更优化的方法来对较大的定界文件（百万行）执行此常见任务，特别是通过宏/方法。

解决方法

请将EmEditor更新到v20.1.901或更高版本，并使用以下形式：

document.SplitColumn("3",";",eeSplitIntoNone,"A+",eeRemoveDuplicates | eeSortIgnorePrefix | eeSortStable,0);

这种新的eeSplitIntoNone类型实际上不会拆分，而只会对元素的重复项进行排序或删除。