用 mysql 、es 、mongodb 、其它哪一种合适？
This topic created in 2019 days ago, the information mentioned may be changed or developed.
 |
heyjeiMay 2, 2021
1
linux 命令中的 sort | uniq 是最简单的方案。如果是 Windows， 安装了 git bash，应该附带了这两个命令
|
 |
2
一楼审题了吗
|
1 |
3
其实一楼没毛病啊，只要打开这两个 excel，文件，导出为 csv，然后 sort|uniq 就行了，无非就是多等一会的事情。几乎不需要考虑什么...
|
 |
4
|
 |
BaboonowenMay 3, 2021 via Android
5
Excel 自带去重。。一键去重。。
|
 |
dzdhMay 3, 2021
6
需要经常使用，找个数据库。
就用一次，145 楼都可 |
 |
jr55475f112iz2tuMay 3, 2021
7
我好奇这千万条手机号是哪里来的
|
 |
9
Sort uniq 性能肯定不如直接去重啊。
你这数据量随便写个脚本用 hashmap 跑一遍就行了，不需要数据库。 |
 |
renmu123May 3, 2021 via Android
10
然后发现最大的问题是从 xlsx 读取这个千万条数据
|
 |
8e47e42May 3, 2021 via iPhone
12
|
 |
drawstarMay 4, 2021
13
@Baboonowen 千万条的 excel 估计打不开吧
|
 |
14
还要得到新旧合并、新旧合并不含重复，重复，三分数据。
|
 |
BQsummerMay 8, 2021
15
看标题我还以为是算法题呢，用 bitmap 处理[doge]
|
Select Language