分类：Python爬虫爬取蚂蚁短租

2021
02-23

Python爬虫设置Cookie解决网站拦截并爬取蚂蚁短租的问题

我们在编写Python爬虫时，有时会遇到网站拒绝访问等反爬手段，比如这么我们想爬取蚂蚁短租数据，它则会提示“当前访问疑似黑客攻击，已被网站管理员设置为拦截”提示，如下图所示。此时我们需要采用设置Cookie来进行爬取，下面我们进行详细介绍。非常感谢我的学生承峰提供的思想，后浪推前浪啊！一.网站分析与爬虫拦截当我们打开蚂蚁短租搜索贵阳市，反馈如下图所示结果。我们可以看到短租房信息呈现一定规律分布，如下图所示，这... 继续阅读 >