使用python+phantomjs抓取动态页面

摘要:使用python+phantomjs抓取动态页面...

作者:LoveCode标签:python,phantomjs,抓取,动态页面

前一段时间公司需要爬取部分web页面的数据使用。但是页面中的主要数据是<span ajax load出来的数据再方便不过啦。 

系统环境:CentOS release 6.5 (Final)

 phantomjs版本:1.9.8


我看到网上很多人是写一个本地文件,然后具体的处理程序再读取那个文件进行处理。感觉这种方式太麻烦了,干脆将数据打印到到标准输出中,然后处理程序从标准输出中读取数据。

用python获取数据。然后就开始处理了。具体的处理逻辑就不展示了。


CopyRight © 2017 荒山本的官方网站 粤ICP备16049175号 All Right Service 网站地图(xml) 网站地图(html)