@zhuifeng1017 #20 啊 大佬，这个哪里有说明吗，真是这样就太好啦

@JCZ2MkKb5S8ZX9pq #17 三个字段的联合索引，目前使用 mongoinsert 导入数据，insert_one 和 insert_many 都比较慢，都放弃了。重复数据保留任何一条就可以了。

@wupher #15 确实是，感觉之前的不使用索引的方式也可以，只是下游取的时候得自己做去重了，而且增量订阅的时候，每次更新的数据量也越来越大了。

@zxlzy #11 放阿里云 aws 基本都是民口的。

@594duck #7 主要是目前只有一个机器，用关系型数据库会比 mongo 慢更多。mongo 不用联合索引每秒我这可以处理到大约 50 万条数据，关系型数据库单点的肯定做不到。

@billlee #8 查询用，之前不加联合索引是查询是很快的，两百亿数据查询，差不多 50ms 就能返回。

@jiangzhuo #5 你这个建议蛮不错的，以后遇到需求感觉可以这么试试，挺好。只是目前这部分数据价格比较高买的，不太想放到别人服务器。

如果没笔记本电脑最好送笔记本电脑，有的话我选 iPad + AirPods 。 苹果就是好，不用黑它。

@abcbuzhiming #3 写了很多程序，也做了非常多的优化，慢的不行。。数据量太大，程序无法支持去重的。

我认识个大佬就是在牛掰的地方太闲，所以就去创业公司 996 了，但是工资更高，不会更低，而且级别、待遇、股份都有。
你 28 岁，咱俩差不多，我觉得你这个选择很错误。因为你能力不足，28 岁去创业公司，远不如去大厂 996，创业公司只会让你一个能力不足的人干到怀疑人生，对你不是历练，对你手底下的人也是灾难。

@wupher #1 尴尬。。。这个是刚需。。

@msg7086 #6 也可以，厉害~~

@zsl199512101234 哈哈 压缩成一个文件我就不来这问啦。
@frozenway 20000 个文件你这个就不行了。一定会报 -bash: /usr/bin/cat: Argument list too long
@asilin 膜拜！！我去看看这个原理是啥。

@ilucio #7 我没太理解，拷贝过去 mongodb 里面怎么使用呢？即使能用数据也不会走 zstd 之类的压缩了吧

@koharu 确实是有点难凭感觉比较，感谢。
@qping 我也有这样的感觉，像是做了读写分离，具体只能测试下了。

@mind3x #4 有道理，确实是这样。

@ilucio #1 你没看明白我的问题。