來源：blog.csdn.net/qq_35387940/article/details/129885310

最近又是一輪代碼review , 發現了一些實現去重的代碼，在使用 list.contain ......

我沉思，是不是其實很多初學者也存在這種去重使用問題？

所以我選擇把這個事情整出來，分享一下。

①

首先是造出一個 List 模擬數據，一共2W條，里面有一半數據1W條是重復的:

public static List getTestList() {
List list = new ArrayList<>();
for (int i = 1; i <= 10000; i++) {
list.add(String.valueOf(i));
}
for (int i = 10000; i >= 1; i--) {
list.add(String.valueOf(i));
}
return list;
}

先看看我們用 contain 去重的代碼：

/**
* 使用 list.contain 去重
*
* @param testList
*/
private static void useContain2Distinct(List testList) {
System.out.println("contains 開始去重，條數：" + testList.size());
List testListDistinctResult = new ArrayList<>();
for (String str : testList) {
if (!testListDistinctResult.contains(str)) {
testListDistinctResult.add(str);
}
}
System.out.println("contains 去重完畢，條數：" + testListDistinctResult.size());
}

我們調用一下看看耗時：

public static void main(String[] args) {
List testList = getTestList();
StopWatch stopWatch = new StopWatch();
stopWatch.start();
useContainDistinct(testList);
stopWatch.stop();
System.out.println("去重 最終耗時" + stopWatch.getTotalTimeMillis());
}

耗時：

評價：list.contain 的效率，我的建議是，知道就行，別用。

②

眾所周知 Set 不存在重復數據， 所以我們來看看使用 HashSet 去重的性能：

ps：這里是采取使用 set 的 add 方法做去重

/**
* 使用set去重
*
* @param testList
*/
private static void useSetDistinct(List testList) {
System.out.println("HashSet.add 開始去重，條數：" + testList.size());
List testListDistinctResult = new ArrayList<>(new HashSet(testList));
System.out.println("HashSet.add 去重完畢，條數：" + testListDistinctResult.size());
}

我們調用一下看看耗時：

public static void main(String[] args) {
List testList = getTestList();
StopWatch stopWatch = new StopWatch();
stopWatch.start();
useSetDistinct(testList);
stopWatch.stop();
System.out.println("去重 最終耗時" + stopWatch.getTotalTimeMillis());
}

耗時：

評價：HashSet 的效率，我的建議是推薦。

③

為什么耗時差距這么大？

不多說，我們看源碼：

list.contains(o)：

可以看到里面用到了 index(o) ：

時間復雜度 ：O(n) n: 元素個數

那么我們看看 set.add(o) 是怎么樣的 ：

map的add , 老生常談就不談了，hash完 直接塞到某個位置， 時間復雜度 ：O(1) 。

所以 O(n) 和 O(1) 誰快誰慢？顯然。

ps：順嘴說下 hashset 的 contain

時間復雜度也是：O(1)

④

那么我們最后再看看別的去重：

雙for循環 ，remove去重

/**
* 使用雙for循環去重
* @param testList
*/
private static void use2ForDistinct(List testList) {
System.out.println("list 雙循環 開始去重，條數：" + testList.size());
for (int i = 0; i < testList.size(); i++) {
for (int j = i + 1; j < testList.size(); j++) {
if (testList.get(i).equals(testList.get(j))) {
testList.remove(j);
}
}
}
System.out.println("list 雙循環 去重完畢，條數：" + testList.size());
}

public static void main(String[] args) {
List testList = getTestList();
StopWatch stopWatch = new StopWatch();
stopWatch.start();
use2ForDistinct(testList);
stopWatch.stop();
System.out.println("去重 最終耗時" + stopWatch.getTotalTimeMillis());
}

耗時：

評價：知道就行，圖個樂，別用，賊慢，而且代碼看起來亂

stream的distinct去重：

/**
* 使用Stream 去重
*
* @param testList
*/
private static void useStreamDistinct(List testList) {
System.out.println("stream 開始去重，條數：" + testList.size());
List testListDistinctResult = testList.stream().distinct().collect(Collectors.toList());
System.out.println("stream 去重完畢，條數：" + testListDistinctResult.size());
}

public static void main(String[] args) {
List testList = getTestList();
StopWatch stopWatch = new StopWatch();
stopWatch.start();
useStreamDistinct(testList);
stopWatch.stop();
System.out.println("去重 最終耗時" + stopWatch.getTotalTimeMillis());
}

耗時：

評價：還不錯，主要是代碼也蠻簡潔，有一點點動心。

最后，如果你還有其他高效去重方法的話，歡迎留言區分享一下唄～