有偿-爬虫模拟登录问题 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
wikii
V2EX    程序员

有偿-爬虫模拟登录问题

  •  
  •   wikii 2021-11-08 18:33:49 +08:00 2935 次点击
    这是一个创建于 1511 天前的主题,其中的信息可能已经有所发展或是发生改变。

    因公司业务需要,需要做一个网站的监控,只要监控到某个型号有上架,就微信通知业务员下单,目前卡在模拟 [登录环节] 上,寻求大神有偿协助

    第 1 条附言    2021-11-08 20:52:37 +08:00
    结贴结贴,已找到可靠的人才,v2 人才济济
    20 条回复    2022-09-04 13:45:26 +08:00
    1018ji
        1
    1018ji  
       2021-11-08 18:39:15 +08:00
    你不发网址,咋给你玩
    wikii
        2
    wikii  
    OP
       2021-11-08 18:40:20 +08:00
    有会大神可以留言 base64 WX 号,我这边加了具体沟通,帐号啥的都有
    wikii
        3
    wikii  
    OP
       2021-11-08 18:41:13 +08:00
    wikii
        4
    wikii  
    OP
       2021-11-08 18:43:57 +08:00
    @1018ji 需要帐号的,如果以前做过模拟登录可以加 WX ( d2lpa2k1MjA4 )号沟通
    ch2
        5
    ch2  
       2021-11-08 19:10:48 +08:00
    最简单的做法:买台 1 核 2G 的 windows server ,手动登录账号
    写个 chrome 插件当内鬼,定期把 cookie 更新到数据库里
    爬虫直接从数据库里拿凭据去爬,不要搞模拟登录啥的
    waterlaw
        6
    waterlaw  
       2021-11-08 19:15:54 +08:00 via Android
    selenium 分分钟搞定
    playniuniu
        7
    playniuniu  
       2021-11-08 19:16:38 +08:00
    想通过这种方式抢芯片的,都不会公开放出自己方案的
    qionnian
        8
    qionnian  
       2021-11-08 19:17:51 +08:00
    @ch2 这个方案只适合部分网站吧,有的就算 chrome 不关闭,到时间了也会下线的
    wangyongbo
        9
    wangyongbo  
       2021-11-08 20:47:08 +08:00
    这个网站哪个页面需要登录才能访问呀?
    wikii
        10
    wikii  
    OP
       2021-11-08 20:51:36 +08:00
    结贴结贴,已找到可靠的人才,v2 人才济济
    wangyongbo
        11
    wangyongbo  
       2021-11-08 21:12:34 +08:00
    我测试了一下。 我可以用脚本访问到 https://www.ti.com/myti/docs/updateprofile 这个页面。

    它的逻辑并不复杂。

    访问 https://www.ti.com/secure-link-forward/?gotoUrl=https%3A%2F%2Fwww.ti.com%2F , 被重定向到 新的页面

    这个新的页面,有一个 form ,使用正则表达式 获取 url , 它需要三个参数

    data = {
    'pf.username': '',
    'pf.pass': '',
    'pf.adapterId': 'IDPAdapterHTMLFormCIDStandard'
    }

    使用 post 方法提交之后, 返回的页面,又有一个新的 form , 还是使用正则表达式,获取 url , 和 2 个参数,

    再次提交数据,之后 访问 https://www.ti.com/myti/docs/updateprofile , 拿到的数据和登录成功是一样的。

    不知道你遇到了什么问题,以及你想访问什么页面。
    wikii
        12
    wikii  
    OP
       2021-11-08 21:49:50 +08:00
    @wangyongbo 我也是按照你上面的思路做的,代码都写好了,但是拿不到 auth_session ,很奇怪
    as9567585
        13
    as9567585  
       2021-11-09 02:17:54 +08:00
    这是要抢芯片吗? 真的是芯片荒啊
    studycode
        14
    studycode  
       2021-11-09 09:56:04 +08:00
    老哥,结贴说下你的解决方案呗,学习下~
    bing8692
        15
    bing8692  
       2021-12-02 17:26:10 +08:00
    可以找我呀,我这个问题已经解决了
    wikii
        16
    wikii  
    OP
       2021-12-03 16:44:30 +08:00
    @bing8692 能成功做到生成订单么?
    tangredtea
        17
    tangredtea  
       2021-12-18 00:12:07 +08:00
    监控的话,还需要登录吗?我试了一下,监控的话不用登录就可以查看库存呀
    ryanz91
        18
    ryanz91  
       2021-12-22 19:59:00 +08:00
    @bing8692 加个 wx 交流一下? d3hpZF83NjdvZWl5a2Jjc2UyMg==
    kopa
        19
    kopa  
       2022-04-16 23:49:32 +08:00
    @bing8692 怎么可以找到你?我也遇到了这个问题
    Lo2333
        20
    Lo2333  
       2022-09-04 13:45:26 +08:00
    楼主有没有老的 TI 接口?可以实现型号无库存加入到购物车里,
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     4263 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 29ms UTC 04:07 PVG 12:07 LAX 20:07 JFK 23:07
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86