大佬们你们都是用什么方式在上亿级别的裤子里搜索的
侧边栏壁纸
  • 累计撰写 57,647 篇文章
  • 累计收到 0 条评论

大佬们你们都是用什么方式在上亿级别的裤子里搜索的

James
2020-11-30 / 0 评论 / 94 阅读 / 正在检测是否收录...

已经导入到mysql,有没有大佬分享一下搜索方案

大家众筹


-----------------------------------------------------
网友回复:

我不敢用这个

小花花沙发马克任务(25/999)




网友回复:

solr

去freebuf搜一下有具体教程。


网友回复:

我直接cat+grep(((

试了下导成sql3分钟才导入了21万条,全弄完得190小时就放弃了

反正只是自己查查


网友回复:

引用:vipmobiletv发表于2020-11-2422:16

我直接cat+grep(((

试了下导成sql3分钟才导入了21万条,全弄完得190小时就放弃了

反正只是自己查查...


网友回复:

https://cloud.189.cn/t/eINbqebMB363

我写了wb查询的,把wb裤子放在d盘,然后把名字重命名我这样。然后输入要查的,回车就出结果了


网友回复:

引用:h20发表于2020-11-2422:17

cat+grep就是脱裤子放屁了


网友回复:

github上还有一个项目叫BreachCompilation

可以把数据按照字母索引分类。然后可以用本地搜索的软件搜索

或者弄个grepwindows版。

属于低配版的方案。

速度也远远没有solr或者elasticsearch快。数据量大的话差50倍不止吧。


网友回复:

写了个python脚本导sqlite里了,导完用不了一小时,15.1G,建个索引又用了10G,一共25.1G。秒查。


网友回复:

引用:caoninmu发表于2020-11-2422:39

写了个python脚本导sqlite里了,导完用不了一小时,15.1G,建个索引又用了10G,一共25.1G。秒查。...


网友回复:

引用:yy10112001发表于2020-11-2422:23

github上还有一个项目叫BreachCompilation

可以把数据按照字母索引分类。然后可以用本地搜索的软件搜索

或...

0