分类：python爬虫selenium

2021
07-22

Python爬虫基础初探selenium

目录Seleniumselenium的用途selenium是优缺点1.Selenium工作原理1.1Selenium配置1.2浏览器驱动1.3使用Selenium2快速入门Python爬虫、数据分析、网站开发等案例教程视频免费在线观看https://space.bilibili.com/523606542SeleniumSelenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，就像玩游戏用的按键精灵，可以按指定的命令自动操作。Selenium测试工具直接操控浏览器中，就像真正的用户在操作一样。Seleni... 继续阅读 >

2020
12-22

python爬虫利用selenium实现自动翻页爬取某鱼数据的思路详解

基本思路:首先用开发者工具找到需要提取数据的标签列利用xpath定位需要提取数据的列表然后再逐个提取相应的数据:保存数据到csv:利用开发者工具找到下一页按钮所在标签:利用xpath提取此标签对象并返回：调用点击事件,并循环上述过程:最终效果图:代码:fromseleniumimportwebdriverimporttimeimportreclassDouyu(object):def__init__(self):#开始时的urlself.start_url="https://www.douyu.com/directory/all"... 继续阅读 >