Python网络爬虫之动态网络爬取(一)

爬虫之动态网络爬取(一)"/>

Python网络爬虫之动态网络爬取(一)

1 Selenium及其他插件安装

1.1 Selenium + PhantomJS T

由于目前最新的SeleniumE经放弃PhantomJs,所以大家在安装时首先要查看下你所安装的Selenium版本信息，在命令行(终端)中输入以下指令来查看Selenium的版本信息：

pip show selenium

如果发现你的版本248.0,需要执行以下操作进行卸载重装Selenium
(1) pip uninstall selenium
(2) pip install selenium==2.48.0

对于安装PhantomJS的方式，书本上已有Windows系统的安装过程，下面主要介绍Liunx系统的安装过程:

(1)官网下载http: //phantomjs . org/ download.html
(2) 解压(注意文件名可能会根据系统不同而改变) tar-xvf phantomjs-2.1.1-linux-x86 _64. tar .bz2
(3)移动到指定目录下同时重命名: sudo my phantomjs-2.1.1-1inux-x86_ 64 /usr/1oca1/ share/ phantomjs
(4)建立链接: **
In-s/usr/1pca1/share/phantomjs/bin/phantomjs /usr/1oca1/bin/ phantomjs**
下面以爬取人民邮电出版社页面(URL: / )内容进行一组对比测试: