使用正则实现字符去重及多行去重

目录

• 单行文本单字符去重
• 多行文本去除重复行

学会正则表达式对开发者而言是个非常有用的技能，很多功能可以简单的用一句正则来实现。

单行文本单字符去重

function DistinctString(s){
    var a;
    while((a=s.replace(/(.)(.*?)\1/,"$1$2"))!=s) s=a;
    return s;
}

 

多行文本去除重复行

function DistinctLines(s){
    var a;
    while((a=s.replace(/(^.+(?:\r\n|\r|\n|$))((?:.*(?:\r\n|\r|\n))*?)^\1(?:\r\n|\r|\n|$)/m,"$1$2"))!=s) s=a;
    return s;
}

 

还可以利用此函数做基本数据类型去重：如字符数组，数值数组等

var a=[123,1234,9123,123,123,1234,321,123,9123,,1234];
DistinctLines(a.join("\n")).split("\n").filter(s=>s.length).map(s=>parseFloat(s));

//[123, 1234, 9123, 321]