爬虫框架:Pyspider的基本使用

工控安全 技巧分享 python 工控安全 爬虫 pyspider

接上文:分享自己的工控爬虫项目—PySpider-ICS

安装

pip install pyspider
如果是Ubuntu,需要安全运行环境
`apt-get install python python-dev python-distribute python-pip \
libcurl4-openssl-dev libxml2-dev libxslt1-dev python-lxml \
libssl-dev zlib1g-dev`

启动

直接输入pyspider all即可
这样可以启动 pyspider 的所有组件,包括 PhantomJS、ResultWorker、Processer、Fetcher、Scheduler、WebUI,这些都是 pysipder 运行必备的组件。

基本使用

启动后即可打开浏览器,输入链接 http://localhost:5000 ,这时我们会看到页面。

官方使用介绍:
http://docs.pyspider.org/en/latest/Quickstart/

新评论

称呼不能为空
邮箱格式不合法
网站格式不合法
内容不能为空