admin管理员组

文章数量:1130349

最近换了电脑,练习爬虫时用到selenium,结果在重新安装chromedriver插件的时候发现原网址不能使用,找了好久终于找到了了新网址,顺便更一篇详细使用的文章,希望可以对屏幕前的你有所帮助。本篇文章共分以下三个板块。

一、什么是 selenium?

二、安装selenium

三、下载chrome driver

一、什么是 selenium?

selenium原本被用于网页测试,是浏览器自动化测试框架,但在爬虫领域,它也实现了极大的价值。selenium 可以控制你的浏览器,模仿人浏览网页,从而获取数据,自动操作等。简单来说,只需运行你的代码,它 就会实现自动打开浏览 器,甚至还能输入账户密码,实现网页登陆等一系列自动操作。

有了 selenium,我们便不再需要判断网页数据加载的方式,只要让 selenium 自动控制浏览器,就像有双无形的手,控制着你的鼠标和键盘,自动地帮你干活。爬取数据?自动抢票?这些当然统统都不在话下。

不过 selenium 也并非没有缺点。因为要打开浏览器并控制它,所以和我们以前学的爬虫相比,它占用的资源会更多,爬取数据的效率也会有所降低,不过至少比我们手动操作还是快很多的。

二、安装selenium

方法一:和其他 Python 第三方库的安装一样,我们要在命令行中使用 pip 命令安装 selenium:

方法二:我用的pycharm,直接在里面安装。File——settings——Project——Python Interpreter——点击"+“——搜索”selenium”——install

三、下载chrome driver

使用elenium 还需要安装相应的浏览器驱动才能控制浏览器(最好使用 Chrome 浏览器),后面都以 Chrome 浏览器 为例,其他浏览器大同小异。

查看Chrome版本:首先打开 Chrome 浏览器,依次点击浏览器右上

最近换了电脑,练习爬虫时用到selenium,结果在重新安装chromedriver插件的时候发现原网址不能使用,找了好久终于找到了了新网址,顺便更一篇详细使用的文章,希望可以对屏幕前的你有所帮助。本篇文章共分以下三个板块。

一、什么是 selenium?

二、安装selenium

三、下载chrome driver

一、什么是 selenium?

selenium原本被用于网页测试,是浏览器自动化测试框架,但在爬虫领域,它也实现了极大的价值。selenium 可以控制你的浏览器,模仿人浏览网页,从而获取数据,自动操作等。简单来说,只需运行你的代码,它 就会实现自动打开浏览 器,甚至还能输入账户密码,实现网页登陆等一系列自动操作。

有了 selenium,我们便不再需要判断网页数据加载的方式,只要让 selenium 自动控制浏览器,就像有双无形的手,控制着你的鼠标和键盘,自动地帮你干活。爬取数据?自动抢票?这些当然统统都不在话下。

不过 selenium 也并非没有缺点。因为要打开浏览器并控制它,所以和我们以前学的爬虫相比,它占用的资源会更多,爬取数据的效率也会有所降低,不过至少比我们手动操作还是快很多的。

二、安装selenium

方法一:和其他 Python 第三方库的安装一样,我们要在命令行中使用 pip 命令安装 selenium:

方法二:我用的pycharm,直接在里面安装。File——settings——Project——Python Interpreter——点击"+“——搜索”selenium”——install

三、下载chrome driver

使用elenium 还需要安装相应的浏览器驱动才能控制浏览器(最好使用 Chrome 浏览器),后面都以 Chrome 浏览器 为例,其他浏览器大同小异。

查看Chrome版本:首先打开 Chrome 浏览器,依次点击浏览器右上

本文标签: 爬虫如何下载浏览器插件selenium适配谷歌