c# - scrapysharp - .net framework con scrapy python

web scraping c# ejemplos

Question

¿Es posible utilizar .NET Framework con Python Scrapy Framework para raspar datos de diferentes sitios? Estoy trabajando en mi proyecto de último año en el que quiero usar C # como lenguaje de entrada y Python para analizar los datos.

Answer 1

No creo que sea posible, porque Scrapy utiliza un motor de red retorcido que no se puede ejecutar en IronPython

Alternativamente, puede iniciar su araña / rastreador a través de la línea de comando usando C # y luego interactuar con él usando la API JSON.

Answer 2

Eche un vistazo a ScrapySharp , también descrito en este blog , que es la versión C # de Python''s Scrapy.