Python爬虫基础:selenium——浏览器对象的常用方法
2023-09-14 09:05:35 时间
浏览器对象的常用方法
当我们通过selenium实例化一个浏览器对象时,可以针对此对象进行操作,常见的操作如下所示:
- driver.get(‘url’)
根据url地址访问站点
- driver.page_source
查看页面渲染之后的html数据
- driver.get_cookies()
查看页面请求后生成的cookies,可以用此方法拿到加密的
- cookiesdriver.current_url
查看当前页面的url
- driver.maximize_window()
最大化浏览器
- driver.minimize_window()
最小化浏览器
- driver.close()
关闭当前页面,注意不是关闭整个浏览器
- driver.quit()
关闭浏览器
学习更多知识或解答疑问、源码、教程请点击
页面等待的方法
现在的网页越来越多采用了Ajax技术,这样程序便不能确定何时某个元素完全加载出来了。如果实际页面等待时间过短导致某个dom元素还没出来,但是你的代码直接使用了这个WebElement,那么就会抛出ElementNotVisibleException的异常。
为了避免这种元素定位困难而且会提高产生ElementNotVisibleException的概率。所以Selenium提供了如下等待方式:
- —种是隐式等待
- 一种是强制等待
隐式等待比较简单,就是简单地设置一个等待时间,单位为秒。隐式等待是等页面加载完毕,而不是元素加载!!!(隐式等待就是针对页面的,显式等待是针对元素的。)
"""
time.sleep(5)强制等待
隐式等待不是一个死等
"""
from selenium import webdriver
driver = webdriver.chrome(executabl1e_path='chromedriver.exe ')
driver.get('https : //www.jd.com/ ')
# 隐式等待,括号里面设置等待的时间,一旦页面早就完成了渲染,那么就不会等待(单位秒)
# 超过隐式等待时间还是会报错
driver.imp1icitly_wait(10)
driver.quit()
隐式等待只需设置一次,后面的代码都遵循这个规则,不像time.sleep 。time.sleep属于强制等待。
强制等待就是死等,设置一个时间阈值,如果在这个时间内渲染完数据,接下来你想获取元素等页面数据,用上述元素提取的方法才不会报错。反之页面数据还没有渲染完数据,你要提取没有渲染完的数据程序就会报错。
浏览器对象的其他方法
除了上述浏览器对象的常用方法以外,还有一些基本操作,如下所示:
- driver.back()
回退到上一级页面
- driver.forward()
前进到下一级页面
- switch_to ()
切换窗口以及嵌套网页
相关文章
- python中super的使用
- Python中转换角度为弧度的radians()方法
- Python实现全局变量的两个解决方法
- 在Python中定义和使用抽象类的方法
- 重新梳理Linux系统中Python环境的问题
- RF中采用python方法获取当月1号、上月1号、下月1号、当前日期N天后日期、当前日期N天前日期、指定月份总天数、上个月份、下个月份、当月最后1天日期、上个月最后1天日期、下个月最后1天日期
- Open3D 点云欧式聚类(python详细过程版)
- 【OpenCV-Python】教程:7-5 理解SVM
- paip.函数方法回调机制跟java php python c++的实现
- Python之tensorboardX:tensorboardX库的简介、安装、使用方法之详细攻略
- Py之ipython:Python库之ipython的简介、安装、使用方法详细攻略
- Python语言学习:三种随机函数random.seed()、numpy.random.seed()、set_random_seed()及random_normal的简介、使用方法(固定种子)详细攻略
- 100天精通Python(数据分析篇)——第50天:numpy进阶(数组操作、常用方法)
- 100天精通Python(爬虫篇)——第43天:爬虫入门知识大总结
- RuntimeError: Python is not installed as a framework
- Python模块:glob 文件路径查找
- 【Leetcode刷题Python】714. 买卖股票的最佳时机含手续费