Python + Selenium 爬虫遇到诡异反爬问题如何解决?

不同的账号登入同一个网址,登陆进去后标签的 id 属性值自动改变,怎么做到批量爬取。(不然一个程序只能爬一个账号,换个账号因为 id 属性值的改变就无法爬取) 头都大了......!


Python + Selenium 爬虫遇到诡异反爬问题如何解决?
16 回复

结构不变就用标签?


我无法理解你的问题。

可能前端纯粹是为了方便把用户 ID 拼到里面,没想到成了反扒手段

重要的是结构,不是 ID,这种根本不能算反爬,你为啥非要用 ID 去定位?? xpath 选择器,selecter 选择器哪个限定了只能用 ID 吗

楼上已经给出答案了

这太难猜了, 给个 HTML 例子让人测测选择器也好啊

不知道怎么描述!全网站禁止右键功能,层层都有 iframe,头大啊

不用 id 选择就行了啊

正则,或者找出账号和 id 关系。

这根本不算反爬+1.
禁止右键,但是查看源代码的方法有很多啊。F12 或者先开一个 DevTool window 再导航过去或者油猴弄个脚本都能解决的。

标题党呀,这算什么“诡异反扒”

看标题,期待的是:网站把你本机给爬了,那才叫做真“诡异”

楼主技术不过关啊,禁止右键都绕不过

技术问题吧, 练多就好了

1.这网页不是我做的。
2.我经常干这事,偷懒不用 cookie。
3.我不是前端。

根本算不上问题的问题…结合早上那个贴子看效果更佳 水文太多了,小白连这么基础的东西都没搞清楚。

回到顶部