会员
周边
捐助
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
磊哥|www.javacn.site
我的小站 www.javacn.site,面试题贼多!
博客园
首页
新随笔
管理
2024年2月19日
面试官:如何实现10亿数据判重?
摘要: 当数据量比较大时,使用常规的方式来判重就不行了。 例如,使用 MySQL 数据库判重,或使用 List.contains() 或 Set.contains() 判重就不可行,因为 MySQL 在数据量大时查询就会非常慢,而数据库又是及其珍贵的全局数据库资源。 《阿里巴巴Java开发手册》上也说了,如
阅读全文
posted @ 2024-02-19 12:00 磊哥|www.javacn.site
阅读(143)
评论(0)
推荐(0)
编辑
公告