欢聚-木木

问题解决方案

java基础(1) jvm(2) linux(1) redis(1) spring(3) 大数据(1) 操作系统(1) 数据库(6) 未归档(2) 算法(3) 线程(1) 计算机网络(1) 设计模式(1) 面试题(4) 高并发(1)

/ 注册

全部文章 / 问题解决方案（共1篇）

海量数据去重(set,字典,bloom)

海量数据去重 HashSet HashSet不重复可以用O(1)判断数据是否存在海量数据的话可以拆分到HashMap每个桶或者多台机器上 BitSet 如果海量数据是整数范围不大构造bit数组，数据都映射到上面如两个比特数组可以存0~3->00 01 10 11 字典树如...

2019-09-17

1 1082