发布于 2017-06-06 01:57:42 | 167 次阅读 | 评论: 0 | 来源: 网友投递
Scrapy Python的爬虫框架
Scrapy是一个Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。
CentOS7下安装Scrapy步骤详细介绍
更新yum
[root@localhost ~]# yum -y update安装gcc及扩展包
[root@localhost ~]# yum install gcc libffi-devel python-devel openssl-devel安装开发工具包
[root@localhost ~]# yum groupinstall -y development安装libxslt-devel支持lxml
[root@localhost ~]# yum install libxslt-devel安装pip
[root@localhost ~]# yum -y install python-pip安装Scrapy
[root@localhost ~]# pip install scrapy感谢阅读，希望能帮助到大家，谢谢大家对本站的支持！