Python爬虫中如何高效处理各位爬师看过来这类问题

爬取图片的时候,下载下来全都是一样的网站广告图片,应该是做了防盗链了,怎么解决呢?
Python爬虫中如何高效处理各位爬师看过来这类问题

18 回复

其实看到这个标题心里一抖,啥叫爬师。


我无法理解你的问题。

伪装啊,找漏洞啊什么的

再请一个专门爬图片的爬师

我第一反应,绝命爬师

哈哈,标题党,不然你们不来啊

伪装浏览器操作是么? selenium 那东西?

那就是爬师爷了。。。

上次我听到这种叫法是 码师。

python 不是应该叫代码的地下情报员么。

可以尝试改下请求头的 referrer 模拟下浏览器内部的请求

各位,找到解决方案了,那网站的做法是每次请求的时候需要带一个随机字符串( UUID ),在这我顺便给你们推荐两个网站吧,一个白天看的 http://www.tuicool.com/a/,增长知识,一个晚上看的 http://www.mmjpg.com ,增长姿势

伪装,就是模拟用户、浏览器等

哪有爬师,只有爬畜

不是虫师么?

吓了一大跳

#11 你说的带 UUID 的网站是哪一个? 是怎么发现的呢?麻烦说一下

mark 晚上回去爬第二个网站

回到顶部