【发布时间】:2014-05-07 07:35:41
【问题描述】:
是否可以将 .NET 框架与 Python scrapy 框架一起使用来从不同站点抓取数据? 我正在做我最后一年的项目,我想使用 C# 作为前端语言和 Python 来抓取数据。
【问题讨论】:
-
我也对此感兴趣。我可以从 .net 使用 scrapy 吗?
标签: c# python scrapy ironpython
是否可以将 .NET 框架与 Python scrapy 框架一起使用来从不同站点抓取数据? 我正在做我最后一年的项目,我想使用 C# 作为前端语言和 Python 来抓取数据。
【问题讨论】:
标签: c# python scrapy ironpython
我认为不可能,因为 Scrapy 使用了 can not run on IronPython 的扭曲网络引擎
或者,您可以使用 C# 通过命令行启动您的蜘蛛/爬虫,然后使用 JSON API 与其交互
【讨论】:
看看ScrapySharp,this blog上也有描述,这是python的Scrapy的C#版本。
【讨论】: