Scrapy是一个高层次的网络抓取和刮框架编写蜘蛛抓取和分析网页的各种用途,从信息检索监测或测试网站。
特点:
- 简单:
- 在Scrapy设计与头脑简单,提供你需要的功能没有得到你的方式
- 在刚写的规则提取网页中的数据,让Scrapy抓取你 整个网站
- 在Scrapy用于生产履带彻底刮除每天500多个零售商的网站,都在同一个服务器
- 在Scrapy设计具有可扩展性,所以它提供了几种机制,堵塞新的代码,而无需触摸框架的核心
- 在Scrapy运行在Linux,Windows,Mac和BSD
- 在Scrapy完全是用Python编写的,这使得它非常容易破解
- 在Scrapy拥有广泛的测试套件具有很好的代码覆盖率
<李类=“bbli”>生产:
<李类=“bbli”>快:
<李类=“bbli”>扩展:
<李类=“bbli”>便携:
<李类=“bbli”>开源和100%的Python:
<李类=“bbli”>好测试:
要求:
- 在Python中
评论没有发现