TL;DR
使用Set 构造函数和spread syntax：
uniq = [...new Set(array)];
“聪明”但幼稚的方式
uniqueArray = a.filter(function(item, pos) {
return a.indexOf(item) == pos;
})
基本上，我们遍历数组，并且对于每个元素，检查该元素在数组中的第一个位置是否等于当前位置。显然，这两个位置对于重复元素是不同的。
使用过滤器回调的第三个（“这个数组”）参数，我们可以避免数组变量的闭包：
uniqueArray = a.filter(function(item, pos, self) {
return self.indexOf(item) == pos;
})
虽然简洁，但该算法对于大型数组（二次时间）并不是特别有效。
哈希表来拯救
function uniq(a) {
var seen = {};
return a.filter(function(item) {
return seen.hasOwnProperty(item) ? false : (seen[item] = true);
});
}
这是通常的做法。这个想法是将每个元素放在一个哈希表中，然后立即检查它的存在。这给了我们线性时间，但至少有两个缺点：
- 由于哈希键在 JavaScript 中只能是字符串或符号，因此此代码不区分数字和“数字字符串”。也就是说，
uniq([1,"1"]) 将只返回 [1]
- 出于同样的原因，所有对象都将被视为相等：
uniq([{foo:1},{foo:2}]) 将仅返回 [{foo:1}]。
也就是说，如果您的数组仅包含基元并且您不关心类型（例如，它始终是数字），则此解决方案是最佳的。
两全其美
一个通用的解决方案结合了这两种方法：它使用散列查找来查找基元并使用线性搜索来查找对象。
function uniq(a) {
var prims = {"boolean":{}, "number":{}, "string":{}}, objs = [];
return a.filter(function(item) {
var type = typeof item;
if(type in prims)
return prims[type].hasOwnProperty(item) ? false : (prims[type][item] = true);
else
return objs.indexOf(item) >= 0 ? false : objs.push(item);
});
}
排序 |独特的
另一种选择是先对数组进行排序，然后删除每个等于前一个元素的元素：
function uniq(a) {
return a.sort().filter(function(item, pos, ary) {
return !pos || item != ary[pos - 1];
});
}
同样，这不适用于对象（因为对于sort，所有对象都是相等的）。此外，我们默默地更改原始数组作为副作用 - 不好！但是，如果您的输入已经排序，这就是要走的路（只需从上面删除 sort）。
独一无二的...
有时需要根据某些条件而不是相等性来唯一化列表，例如，过滤掉不同但共享某些属性的对象。这可以通过传递回调优雅地完成。此“键”回调应用于每个元素，并删除具有相同“键”的元素。由于key 预计会返回一个原语，因此哈希表在这里可以正常工作：
function uniqBy(a, key) {
var seen = {};
return a.filter(function(item) {
var k = key(item);
return seen.hasOwnProperty(k) ? false : (seen[k] = true);
})
}
一个特别有用的key() 是JSON.stringify，它将删除物理上不同但“看起来”相同的对象：
a = [[1,2,3], [4,5,6], [1,2,3]]
b = uniqBy(a, JSON.stringify)
console.log(b) // [[1,2,3], [4,5,6]]
如果key 不是原始的，则必须求助于线性搜索：
function uniqBy(a, key) {
var index = [];
return a.filter(function (item) {
var k = key(item);
return index.indexOf(k) >= 0 ? false : index.push(k);
});
}
在 ES6 中你可以使用 Set:
function uniqBy(a, key) {
let seen = new Set();
return a.filter(item => {
let k = key(item);
return seen.has(k) ? false : seen.add(k);
});
}
或Map:
function uniqBy(a, key) {
return [
...new Map(
a.map(x => [key(x), x])
).values()
]
}
这两者也适用于非原始键。
第一个还是最后一个？
当通过键删除对象时，您可能希望保留“相等”对象中的第一个或最后一个。
使用上面的Set 变量保留第一个，使用Map 保留最后一个：
function uniqByKeepFirst(a, key) {
let seen = new Set();
return a.filter(item => {
let k = key(item);
return seen.has(k) ? false : seen.add(k);
});
}
function uniqByKeepLast(a, key) {
return [
...new Map(
a.map(x => [key(x), x])
).values()
]
}
//
data = [
{a:1, u:1},
{a:2, u:2},
{a:3, u:3},
{a:4, u:1},
{a:5, u:2},
{a:6, u:3},
];
console.log(uniqByKeepFirst(data, it => it.u))
console.log(uniqByKeepLast(data, it => it.u))
库
underscore 和 Lo-Dash 都提供了 uniq 方法。他们的算法与上面的第一个sn-p基本相似，归结为：
var result = [];
a.forEach(function(item) {
if(result.indexOf(item) < 0) {
result.push(item);
}
});
这是二次函数，但还有一些不错的附加功能，例如包装原生 indexOf、通过键唯一化的能力（用他们的说法是 iteratee）以及对已排序数组的优化。
如果你在使用 jQuery 并且不能忍受前面没有美元的任何东西，它是这样的：
$.uniqArray = function(a) {
return $.grep(a, function(item, pos) {
return $.inArray(item, a) === pos;
});
}
这也是第一个 sn-p 的变体。
性能
函数调用在 JavaScript 中的开销很大，因此上述解决方案虽然简洁，但并不是特别有效。为获得最佳性能，请将filter 替换为循环并去掉其他函数调用：
function uniq_fast(a) {
var seen = {};
var out = [];
var len = a.length;
var j = 0;
for(var i = 0; i < len; i++) {
var item = a[i];
if(seen[item] !== 1) {
seen[item] = 1;
out[j++] = item;
}
}
return out;
}
这段丑陋的代码与上面的 sn-p #3 相同，但速度快了一个数量级（截至 2017 年，它的速度只有两倍 - JS 核心人员做得很好工作！）
function uniq(a) {
var seen = {};
return a.filter(function(item) {
return seen.hasOwnProperty(item) ? false : (seen[item] = true);
});
}
function uniq_fast(a) {
var seen = {};
var out = [];
var len = a.length;
var j = 0;
for(var i = 0; i < len; i++) {
var item = a[i];
if(seen[item] !== 1) {
seen[item] = 1;
out[j++] = item;
}
}
return out;
}
/////
var r = [0,1,2,3,4,5,6,7,8,9],
a = [],
LEN = 1000,
LOOPS = 1000;
while(LEN--)
a = a.concat(r);
var d = new Date();
for(var i = 0; i < LOOPS; i++)
uniq(a);
document.write('<br>uniq, ms/loop: ' + (new Date() - d)/LOOPS)
var d = new Date();
for(var i = 0; i < LOOPS; i++)
uniq_fast(a);
document.write('<br>uniq_fast, ms/loop: ' + (new Date() - d)/LOOPS)
ES6
ES6 提供了Set 对象，这让事情变得更加简单：
function uniq(a) {
return Array.from(new Set(a));
}
或
let uniq = a => [...new Set(a)];
请注意，与 python 不同，ES6 集合是按插入顺序迭代的，因此此代码保留了原始数组的顺序。
但是，如果您需要一个具有唯一元素的数组，为什么不从一开始就使用集合呢？
发电机
可以在相同的基础上构建基于生成器的“惰性”uniq 版本：
- 从参数中获取下一个值
- 如果已经看过，请跳过
- 否则，让出它并将其添加到已看到值的集合中
function* uniqIter(a) {
let seen = new Set();
for (let x of a) {
if (!seen.has(x)) {
seen.add(x);
yield x;
}
}
}
// example:
function* randomsBelow(limit) {
while (1)
yield Math.floor(Math.random() * limit);
}
// note that randomsBelow is endless
count = 20;
limit = 30;
for (let r of uniqIter(randomsBelow(limit))) {
console.log(r);
if (--count === 0)
break
}
// exercise for the reader: what happens if we set `limit` less than `count` and why