这是一份非常简单的介绍文件
最近正好在开发爬虫相关项目,就想再写个简单的爬虫,爬迷路的牙刷吧(欸嘿~
爬虫脚本位于/readme/*.py
。处于开发成本考虑,并未编写自动过验证功能。因为百度贴吧的反爬虫不是很严格,单爬虫连续爬50条帖子才会触发验证码,且贴吧中帖子较少,所以就通过重启路由器换IP来解决了。
本站所有功能均前端处理,没有用到任何后端代码。
帖子数据的加载依赖我个人的静态资源服务,如果需要二次部署,则需要自己再通过脚本爬一遍贴吧。项目中也提供一份汇总文件(/readme/summary.json
)用于存档和示例。
PS:代码写的非常非常非常的垃圾,因为是熬夜做的,只想着完成功能,完全不考虑可维护性和代码规范,完全是以能用就行的目标写的,,各位大佬轻喷,球球了
邮箱:i#mr-wu.top(#换为@)