当前位置: 代码迷 >> 综合 >> 大数据常考--bitmap用来去重占用内存少
  详细解决方案

大数据常考--bitmap用来去重占用内存少

热度:62   发布时间:2024-02-26 11:22:48.0

      大数据,内存限制用bitmap,uint32用2^32表示,对应的bitmap大小0.5G。

      这里要去重,直接遍历一次,然后统计bitmap里面的数据就可以达到去重的目的

      这里假设读者已懂bitmap,只是简单的说下思路。