
撒花! 我们又在大家的意见中改进了 详情页爬取的功能,快来扔砖! 另外我们就之前的功能做了一个详细的讲解视频,欢迎大家看,知名声优配音哦。 欢迎更多的意见。
1 eminemcola 2017 年 2 月 27 日 好! |
2 GrahamCloud OP @eminemcola 好在哪! |
3 skywayman 2017 年 2 月 27 日 广告? |
4 GrahamCloud OP @skywayman 不是不是 |
5 sohoer 2017 年 2 月 27 日 这么久了数据还是对不齐,哈哈 |
6 eminemcola 2017 年 2 月 27 日 @GrahamCloud 哪儿都好! |
7 mingyun 2017 年 2 月 27 日 还录制视频,赞一个 |
8 seiuneko 2017 年 2 月 28 日 在 https://dashboard.zaoshu.io/ 隔几秒弹出 [任务列表中没有任务] 以及 现在竖屏打开首页还是没有显示图标 |
9 GrahamCloud OP @sohoer 哪个数据,很多都改正了啊。 |
10 GrahamCloud OP @mingyun 新功能还会配视频的。 |
11 GrahamCloud OP @F0nebula 竖屏是不支持,弹出这个求问详细。 |
12 Anine 2017 年 2 月 28 日 via iPhone 有 API 吗 |
13 GrahamCloud OP @zhouxu417 马上会上,可以提需求一块琢磨。也欢迎加团队微信: Zaoshuio |
14 lingoerer/strong> 2017 年 2 月 28 日 数据爬出来放 Excel 差评啊…… |
15 GrahamCloud OP @lingoerer 为啥差评,输出 还有很多其他格式可以选择啊。 |
16 seiuneko 2017 年 2 月 28 日 |
18 GrahamCloud OP @F0nebula 感谢,求加 微信: Zaoshuio |
19 NirvanaCN 2017 年 3 月 1 日 上次抓 JD 的数据 抓了十分钟 什么也没抓到 还报错了 |
20 GrahamCloud OP @NirvanaCN 现在好了没有,没有就再解决一下。 |
21 jijiwaiwai 2017 年 3 月 2 日 |
22 jijiwaiwai 2017 年 3 月 2 日 打造自己的云爬虫; http://www.infosec-wiki.com/?p=308 |
23 GrahamCloud OP @jijiwaiwai 文章很有意思。 |
24 GrahamCloud OP @jijiwaiwai 架构很有意思,求加微信: Zaoshuio |
25 Reign 2017 年 3 月 3 日 一直搞不懂这种云爬虫优势在什么地方,实际爬网站的时候遇到的情况千变万化,控制频率、切换代理、验证码、邮箱验证、手机验证、伪装 header 等等,各种网站反爬虫系列一个比一个厉害,遇到没 header 的,加入黑名单,遇到只请求内容不请求 css 的,加入黑名单,遇到 phantomjs 的,加入黑名单,请求次数太猛的,加入黑名单。如果真的是爬一个简单的新闻页面, chrome 一个 F12 ,几分钟就创建一个爬虫,还需要在页面上点过去点过来啊? |
26 LittleWhiteMouse 2017 年 3 月 3 日 @Reign +1 想爬的时候用它爬不成,不是工具不好,是肯定被各种反杀。 可视化选择很好,但是想选中合适的元素并不容易,除非可以自己定制选择器…… 都这么麻烦了,自己写个油猴脚本也就把事情办了,效率是低了点,但是被杀的可能性也低了,工作量不是很大的情况已经足够用了 |
27 GrahamCloud OP @< href="/member/Reign">Reign 说的有道理,目前解决一些 完全没编程基础的 分析人士基本采集数据的需求,还是反响不错的。 你说的反爬,验证,我们都会一个个完善的。 欢迎加团队微信: Zaoshuio 期待更多意见 |
28 GrahamCloud OP @LittleWhiteMouse 就是因为有反杀的才有一点商业价值啊, v2 都是程序员背景为主,其实还有很多人还是最原始的方式抓取信息。 |
29 LittleWhiteMouse 2017 年 3 月 3 日 |
30 GrahamCloud OP @LittleWhiteMouse 暂时不会支持选择器功能,以后可能会上。 |
31 Livid MOD PRO Moved to /go/promotions |
32 duhai973 2017 年 4 月 22 日 高不成,低不就 |