python3-scrapy学习之selenium自动下拉
有很多需求需要我们控制页面自动下拉
可以用到这个selenium的browser.execute_script里面编写JS控制页面下拉
browser.get("https://www.oschina.net/blog") for i in range(10): browser.execute_script("window.scrollTo(0, document.body.scrollHeight); var lenOfPage=document.body.scrollHeight; return lenOfPage;") time.sleep(4)这是模拟开源中国博客,其它的可以自行扩散,中间会遇到加载更多等等这个写个判断就可以了
- 版权申明:此文如未标注转载均为本站原创,自由转载请表明出处《龙行博客》。
- 本文网址:https://www.liaotaoo.cn/15.html
- 上篇文章:python3-scrapy学习之selenium不加载图片
- 下篇文章:python-selenium对应chrome版本下载