迫于很多新手不懂,开坑了个新系列《如何让你写的爬虫速度像坐火箭一样快》,这篇先来讲讲并发请求(公众号直链) - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
27 条回复    2019-07-18 17:14:57 +08:00
RangerWolf
    1
RangerWolf  
   2019-07-17 00:16:34 +08:00
看了第一篇, 有收获。
已关注
locoz
    2
locoz  
OP
   2019-07-17 00:23:50 +08:00
@RangerWolf #1 谢谢~
locoz
    3
locoz  
OP
   2019-07-17 09:05:13 +08:00 via Android
捞一下
xianyucoder
    4
xianyucoder  
   2019-07-17 09:48:54 +08:00
请大佬继续面向我们新手输出文章~ 咸鱼先喊 666 了
locoz
    5
locoz  
OP
   2019-07-17 09:54:09 +08:00
@xianyucoder #4 好的
Specs
    6
Specs  
   2019-07-17 09:57:15 +08:00
有没有解决 安卓 7.0 以上抓包证书失效的方法呀?
locoz
    7
locoz  
OP
   2019-07-17 09:58:32 +08:00
@Specs #6 这个在前面的文章中有说,可以看看《当你写爬虫抓不到 APP 请求包的时候该怎么办? [中级篇]》这一篇
cxyfreedom
    8
cxyfreedom  
   2019-07-17 10:07:23 +08:00
很不错的干货!
locoz
    9
locoz  
OP
   2019-07-17 10:09:21 +08:00
@cxyfreedom #8 谢谢
huaerxiela6
    10
huaerxiela6  
   2019-07-17 10:12:43 +08:00
pengbing
    11
pengbing  
   2019-07-17 10:20:58 +08:00
周总好
Vapriest
    12
Vapriest  
   2019-07-17 12:33:14 +08:00 via iPhone
可乐鸽好
lhx2008
    13
lhx2008  
   2019-07-17 12:45:37 +08:00 via Android
足够快大多时候并没有什么卵用。。早就触发反爬虫了
locoz
    14
locoz  
OP
   2019-07-17 12:52:31 +08:00
@lhx2008 #13 对频率限制的反爬只要有钱没有过不了的,问题不大
locoz
    15
locoz  
OP
   2019-07-17 12:52:58 +08:00
@pengbing #11 雷猴
locoz
    16
locoz  
OP
   2019-07-17 12:53:07 +08:00
@Vapriest #12 雷猴
zdnyp
    17
zdnyp  
   2019-07-17 13:12:31 +08:00
@huaerxiela6 在线捉~
locoz
    19
locoz  
OP
   2019-07-17 18:06:09 +08:00
@zdnyp #18 啥?你发的那个 URL 看不了
caneman
    20
caneman  
   2019-07-17 19:08:53 +08:00
支持一下
zdnyp
    21
zdnyp  
   2019-07-18 09:15:05 +08:00
@locoz #19 不会啊,我开隐私模式都能看到图片 //wx1.sinaimg.cn/mw1024/823a29baly1g53q3qq39dj20gy06o3z6.jpg
locoz
    22
locoz  
OP
   2019-07-18 12:42:11 +08:00
@zdnyp #21 可能是 referer 的问题。。你 Python 版本是多少?而且为啥 from asyncio import async ?
zdnyp
    23
zdnyp  
   2019-07-18 14:30:28 +08:00
@locoz anaconda3 的 Python 3.6,from asyncio import async 是因为我看 async 也没高量,而且能从 asyncio 导入,我就导了一下...
efaun
    24
efaun  
   2019-07-18 15:47:32 +08:00
已关注公众号,大佬继续加油~
locoz
    25
locoz  
OP
   2019-07-18 15:52:55 +08:00
@zdnyp #23 会不会是你编辑器 /IDE 的版本没有调?你看看设置? Python3.6 是可以用 async 和 await 语法的啊
locoz
    26
locoz  
OP
   2019-07-18 15:53:08 +08:00
@efaun #24 谢谢
zdnyp
    27
zdnyp  
   2019-07-18 17:14:57 +08:00
@locoz 懵圈...PyCharm 里用的 Python 版本,有时候是 2.x,有时候是 3.x,print 的补全都不带括号...但是我电脑上只有一个 Python 环境...重启 PyCharm 又可以高亮了...
关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2739 人在线   最高记录 6679       Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 27ms UTC 14:08 PVG 22:08 LAX 07:08 JFK 10:08
Do have faith in what you're doing.
ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86