爬虫框架-scrapy的使用

日期：2021-09-29 栏目：程序人生浏览：次

Scrapy是纯python实现的一个为了爬取网站数据、提取结构性数据而编写的应用框架。

Scrapy使用了Twisted异步网络框架来处理网络通讯，可以加快我们的下载速度，并且包含了各种中间件接口，可以灵活的完成各种需求

1、安装

sudo pip3 install scrapy

内容版权声明：除非注明，否则皆为本站原创文章。

转载注明出处：https://www.heiqu.com/zypjzj.html