虫部落

小蛇搜搜:专搜个人博客的搜索引擎

查看: 1841|回复: 4
撩月 发表于 2020-5-18 10:08:04 |阅读模式


小蛇搜搜
是一个专搜个人博客的小应用,迄今为止 建千万级别博客索引,爬取十万级别个人独立博客域名;愿景是网罗全网的个人技术博客,做一个纯粹的技术博客搜索平台!作者@funer


主要的技术
一说索引可能有人觉得就是用的es, 其实这里,自己实现索引的时候没有用索引,直接自己动手实现简单的倒排 + skiplist,不光是内存贮存数据,也能支持落盘和从磁盘加载形成倒排等操作;

项目 demo 地址:http://49.233.52.50/,如果要使用github登录, 需要用本地 charles 代理下域名:www.xiaoshesoso.comhttp://49.233.52.50; 主要爬取独立博客,并按照博主的热度进行简单排序,也可以时间排序!


项目代码
先放出小蛇搜搜的 nodejs 做的前台 server 代码: https://github.com/funeyu/snake-web-server ;该 nodejs 代码基于 koa2 二次封装,项目逻辑比较清晰,欢迎大家加星等操作!!
Lolosky 发表于 2020-5-18 16:54:30
打开是空白页
shmo 发表于 2020-5-18 11:41:59
尝试一下
布拉格 发表于 2020-5-18 12:04:58
不错。不过现在还写个人博客的越来越少了,少了那份独处的小天地,聚在一起唱着一群人的寂寞。
Dus 发表于 2020-6-2 15:39:22
SURF-
SORRY, I AM AFRAID THAT WE JUST SEE IT  IN "BIANK WHITE".
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表