Red de conocimiento informático - Conocimiento del nombre de dominio - Cómo ejecutar múltiples rastreadores scrapy utilizando scripts de Python

Cómo ejecutar múltiples rastreadores scrapy utilizando scripts de Python

1. Cree varias arañas, dominio scrapy genspider spidername

scrapy genspider CnblogsHomeSpider cnblogs.com

Utilice el comando anterior para crear un nombre de araña para CnblogsHomeSpider, start_urls es, verifique cuántas hay bajo el proyecto Una lista scrapy del rastreador

[root@bogon cnblogs]# lista scrapy

CnblogsHomeSpider

CnblogsSpider

Esto me dice que hay dos Hay dos arañas, una llamada CnblogsHomeSpider y la otra llamada CnblogsSpider.