多线程哈希表求助

Liujian123 · 发表于 2025-5-16 04:13:56

第一小学,李一，刘一，薛一，陈一，邓一

第二小学,李二，刘二，薛二，陈二，邓二

第三小学,李三，刘三，薛三，陈三，邓三

...（省略，数据很多）

如何用多个线程分别把三个学校后面对应的一堆名字添加到哈希表？或者除了用哈希表来存这些数据以外还有没有更快速方便的(要求方便后面取数据,数据量比较大)

没事瞎琢磨 · 发表于 2025-5-16 04:13:57

Liujian123 发表于 2025-5-16 07:34
我不需要持久存储的,其实我的需求是，爬取网页数据然后监控数据的变化，流程就是:爬数据——储存数据—— ...

那就用redis

xiechangmao · 发表于 2025-5-16 04:25:00

直接sqlite或者用易数据库存啊

Liujian123 · 发表于 2025-5-16 05:09:20

xiechangmao 发表于 2025-5-16 04:25
直接sqlite或者用易数据库存啊

qlite和易数据库有优势一点吗

易肆玖 · 发表于 2025-5-16 05:21:52

论优势云数据库必然最优，本地数据体量过大也会导致读取速度慢

Liujian123 · 发表于 2025-5-16 05:33:54

易肆玖发表于 2025-5-16 05:21
论优势云数据库必然最优，本地数据体量过大也会导致读取速度慢

要求多线程读写的,数据也不算太多，就一两万个“名字”这样子，推荐一下

xiechangmao · 发表于 2025-5-16 06:32:38

Liujian123 发表于 2025-5-16 05:33
要求多线程读写的,数据也不算太多，就一两万个“名字”这样子，推荐一下 ...

一两万sqlite跟edb这种本地库就好了不至于上mysql这种云数据库

xiaoyu1986 · 发表于 2025-5-16 07:00:59

哈希表不是最好的选择，它只是将数据映射到一个小范围的地址空间实现快速查找、修改、插入和删除等。
要持久存储，还得将哈希表数据存储到类似MySQl、SQLite。。。何不直接用mysql或SQLite呢？也不影响查找、修改、插入和删除

Liujian123 · 发表于 2025-5-16 07:34:46

xiaoyu1986 发表于 2025-5-16 07:00
哈希表不是最好的选择，它只是将数据映射到一个小范围的地址空间实现快速查找、修改、插入和删除等。
要持 ...

我不需要持久存储的,其实我的需求是，爬取网页数据然后监控数据的变化，流程就是:爬数据——储存数据——再爬数据——用新的数据对比旧的储存数据来监控数据的变化——........(重复执行)
这种情况还是用数据库最好吗

qqmqqg · 发表于 2025-5-16 08:06:07

有多大数据了 T级码

		自动登录	找回密码
密码			注册

[完成] 多线程哈希表求助

最佳答案

评分