Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取（更确切来说,网络抓取）所设计的，也可以应用在获取API所返回的数据或者通用的网络爬虫。
创建项目
scrapy startproject [项目名]
运行爬虫
scrapy crawl [爬虫名]
2020-02-24 爬虫框架scrapy学习&01简单使用
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成，浏览时请结合常识与多方信息审慎甄别。
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。
【社区内容提示】社区部分内容疑似由AI辅助生成，浏览时请结合常识与多方信息审慎甄别。
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。
相关阅读更多精彩内容
- 本文希望达到以下目标: 简要介绍Scarpy 阅读官网入门文档并实现文档中的范例 使用Scarpy优豆瓣爬虫的抓取...
- 爬虫文章 in 简书程序员专题： like:128 - Python 爬取落网音乐 like:127 - 【图文详...
- 2019.3.30 虽然在寒假时已经自学过了网络爬虫的相关知识，但一是因为当时学习的是使用urllib（在Pyth...
- Python版本管理：pyenv和pyenv-virtualenvScrapy爬虫入门教程一 安装和基本使用Scr...
