哪里可以买到价格实惠的代理池? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
melonux
V2EX    Python

哪里可以买到价格实惠的代理池?

  •  
  •   melonux 2019-05-31 11:28:35 +08:00 4746 次点击
    这是一个创建于 2401 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我在做爬虫. 用网上公开的代理, 可以抓取一般性的网站. 但是对于新浪微博, 这些代理经常被判定为爬虫, 完全一致的 HTML Request, 它们返回的内容很少, 跟我用自己的 IP 得到的内容不一样.

    所以我想知道, 哪里有更高质量的代理, 我想采购一批.
    请大家推荐一下吧, 先谢谢了.
    24 条回复    2019-07-08 10:17:23 +08:00
    harvies
        1
    harvies  
       2019-05-31 12:39:15 +08:00
    不是代理的问题,是检测你的行为
    yaoye555
        2
    yaoye555  
       2019-05-31 14:22:07 +08:00   1
    网上 ip 代理上一搜一大把,不过建议可以自己买个 vps 搭一个代理,自己一个人随便用
    kina100
        3
    kina100  
       2019-05-31 15:06:46 +08:00
    @yaoye555 他是要不停的换 ip 采集,你让他买个 vps 做什么?他又不是做梯子。审题啊!
    scukmh
        4
    scukmh  
       2019-05-31 15:38:21 +08:00 via iPhone   1
    @kina100 有一种 vps 是重复拨号换 IP 的
    hzfyjgw
        5
    hzfyjgw  
       2019-05-31 15:41:14 +08:00   1
    推荐阿布云 这种现成的地址池服务
    melonux
        6
    melonux  
    OP
       2019-05-31 20:02:56 +08:00
    @hzfyjgw 阿布云倒没尝试过, 我研究研究
    melonux
        7
    melonux  
    OP
       2019-05-31 20:03:24 +08:00
    @scukmh 请问哪里有这种 vps?
    melonux
        8
    melonux  
    OP
       2019-05-31 20:04:54 +08:00
    @harvies 不像. 因为我能确定除了 IP, 发出的内容完全一样. 行为无非是某 IP 在一段时间内的访问频次.
    m95r1jQyWNZ0uhqn
        9
    m95r1jQyWNZ0uhqn  
       2019-05-31 20:11:15 +08:00 via Android
    前段时间毕设爬虫用的阿布云那个动态 HTTP,感觉还行
    renmu123
        10
    renmu123  
       2019-05-31 21:11:40 +08:00 via Android
    那种自带拨号的
    renmu123
        11
    renmu123  
       2019-05-31 21:12:41 +08:00 via Android
    (补楼上)vps 速度挺慢的,找个收费的代理池(网上看看评测,其实也就那么几家)
    pppguest3962
        12
    pppguest3962  
       2019-05-31 21:28:31 +08:00   1
    @melonux,对这个问题表示关注,因为过几个月我也肯定需要这个。。。
    在前几个星期构思解决这个需求的时候,有想象过用 Tor 来解决? 只是太忙,没把 Tor 的工作方式了解完,不知道 Tor 没有有强制改变刷新变更出口节点的 option 开关? 如果有的话,变换 IP 应该也是能做到的? 不太成熟的想法,不知道可行不可行。。。
    E520
        13
    E520  
       2019-06-01 09:37:49 +08:00 via Android
    联系我
    melonux
        14
    melonux  
    OP
       2019-06-01 15:51:33 +08:00
    @pppguest3962 Tor 方案有趣啊. 只是国内用可能由法律风险.
    melonux
        15
    melonux  
    OP
       2019-06-01 15:58:26 +08:00
    @E520 不好意思, 这个站没法私信. 而且我只能走对公采购, 如果您有公司做这方面的业务, 请给我个网址吧
    harvies
        16
    harvies  
       2019-06-01 19:12:00 +08:00 via Android
    @melonux 上个月我爬过淘宝,绕过了反爬机制(人工智能检测,就像 google 的验证码),没有换 ip,你正常上微博,它会封你吗,很多用户都是内网,容易误封
    chengxiao
        17
    chengxiao  
       2019-06-03 12:53:22 +08:00   1
    @hzfyjgw 并不推荐阿布云 如果是小网站什么的 可以推荐阿布云 ,现在国内几家大公司的站把阿布云的 ip 屏的差不多了
    melonux
        18
    melonux  
    OP
       2019-06-03 15:45:02 +08:00
    @harvies 厉害. 能简单分享一下你如何控制行为而避免被发现的吗?
    melonux
        19
    melonux  
    OP
       2019-06-03 15:45:49 +08:00
    @chengxiao 确实我也担心这个. 我多找几家的 HTTP 隧道, 同时跑一段时间, 看谁的更有效.
    yaoye555
        20
    yaoye555  
       2019-06-05 15:57:03 +08:00
    @kina100 vps 不断拨号做 ip 没毛病啊 老铁
    linvaux
        21
    linvaux  
       2019-06-10 23:22:48 +08:00 via Android
    阿布云
    dai123456
        22
    dai123456  
       2019-07-06 10:11:59 +08:00
    联系我,有这方面的资源,肯定能帮助到你
    melonux
        23
    melonux  
    OP
       2019-07-08 10:17:03 +08:00
    @E520 谢谢. 请加我微信 shenlei_wx, 注明代理
    melonux
        24
    melonux  
    OP
       2019-07-08 10:17:23 +08:00
    @dai123456 谢谢. 请加我微信 shenlei_wx, 注明代理
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     844 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 26ms UTC 21:54 PVG 05:54 LAX 13:54 JFK 16:54
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86