这是一个创建于 3026 天前的主题，其中的信息可能已经有所发展或是发生改变。
这段时间开发了一个动态可配置的爬虫网站 http://www.anycrawl.info，基于 scrapy，提供一些配置项，5 分钟就可生成一个通用爬虫，并可直接下载代码使用。
上 demo 和 截图
爬取豆瓣害羞组的帖子和图片： https://www.douban.com/group/haixiuzu/discussion
项目地址： http://www.anycrawl.info/project/15/
配置上图的选项后，即可下载爬虫源码使用
更多教程可参考这篇文章： https://zhuanlan.zhihu.com/p/31659456
 | 1 Lax 2017 年 12 月 4 日 宣传的例子直接 17+ 啦 还有好多小学生，建议换个别的组 [正义脸 |
 | 2 zqjilove 2017 年 12 月 4 日 今天见到最亮的产品了 。 |
 | 3 hwwh1999 2017 年 12 月 4 日 收藏一个! |
 | 4 mon3 2017 年 12 月 4 日 看了这个小组之后对你的爬虫没兴趣了。 |
 | 5 zirconium 2017 年 12 月 4 日 via iPhone mark |
 | 7 fhefh 2017 年 12 月 4 日 今天看到另外一个帖子 也准备这么搞的 跟楼主想到一块去了 哈哈哈 |
 | 8 Fe1Fan 2017 年 12 月 6 日 看了这个小组之后对你的爬虫没兴趣了+1 |
 | 9 feiniu 2017 年 12 月 6 日 豆瓣还能这么玩，长见识了。看来是我太单纯啊 |
 | 10 bao3 2017 年 12 月 6 日 我是很认真看楼主的产品，可是点开的那一刻，我一直在看豆瓣了。。。。。 |
Select Language