发布于 2017-07-06 01:17:37 | 235 次阅读 | 评论: 0 | 来源: 网友投递
Scrapy Python的爬虫框架
Scrapy是一个Python开发的一个快速,高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。
如下所示:
scrapy stratproject projectname ##创建一个项目
scrapy genspider myspidername fider ##创建一个spider文件
scrapy crawl spidername ## 执行一个spider程序
scrapy shell url ## 动态执行代码
以上这篇浅谈scrapy 的基本命令介绍就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持PHPERZ。