浏览器 driver (Chrome & Edge)驱动安装、Selenium 安装,使用Selenium进行网页自动化操作与数据抓取(Edge)
先补充一下之前一篇 json数据类型 & Xpath 用法 & 爬取豆瓣电影信息 的代码。在这篇文章的最后展示了豆瓣电影Top250榜单爬取,但是只爬取了一页,而且是用打印的方式输出来的。现在补充一下该网站的多页抓取,并且将信息存在文件中的完整代码,如下# coding=utf-8
import requests
fr
