腾讯云主机Python3环境安装PySpider爬虫框架过程

大家好,本篇文章为大家讲解腾讯云主机上 PySpider 爬虫框架的安装。

[1489602983716_6115_1489602984767.jpeg]

首先,在此附上项目的地址,以及官方文档

PySpider

官方文档

安装流程

pip

首先确保你已经安装了 pip,若没有安装,请参照此文

phantomjs

PhantomJS 是一个基于 WebKit 的服务器端 JavaScript API。它全面支持web而不需浏览器支持,其快速、原生支持各种Web标准:DOM 处理、CSS 选择器、JSON、Canvas 和 SVG。 PhantomJS 可以用于页面自动化、网络监测、网页截屏以及无界面测试等。

安装方式

以上附有官方安装方式,如果你是 Ubuntu,还可以使用如下命令:

代码语言:txt
复制
sudo apt-get install phantomjs

pyspider

直接运行pip安装即可

代码语言:txt
复制
pip install pyspider

测试

安装完成之后,如果没有任何的报错,那就OK

命令行输入

代码语言:txt
复制
pyspider all

然后浏览器访问 http://localhost:5000

观察一下效果,如果可以正常出现 PySpider 的页面,那证明一切OK

在此附图一张,这是我写了几个爬虫之后的界面。

[1489602955452_8702_1489602956431.png]

相关推荐

腾讯云主机Python3环境安装Scrapy爬虫框架过程及常见错误

腾讯存储与CDN免费体验