Scrapy-Redis 의 RedisSpider 와 RedisCrawlSpider 상세 설명

이 문 제 를 해결 하기 위해 Scrapy-Redis 는 RedisSpider 와 RedisCrawlSpider 두 개의 파충 류 를 제공 합 니 다.이 두 종류의 Spider 를 계승 하여 시작 할 때 지정 한 Redis 목록 에서 start 를 가 져 올 수 있 습 니 다.urls；임의의 파충류 인 스 턴 스 가 Redis 목록 에서 url 을 가 져 올 때 목록 에서 팝 업 되 기 때문...

Scrapy-RedisRedisSpiderRedisCrawlSpider