如何在 scrapy/python 中使用 webkit 代码

【问题标题】：how to use webkit code in scrapy/python如何在 scrapy/python 中使用 webkit 代码
【发布时间】：2012-10-25 12:55:01
【问题描述】：

在How to combine scrapy and htmlunit to crawl urls with javascript的问题中，建议使用webkit和scrapy来浏览javascript。然而，这个example Snipplr snippet 说：

import gtk
import webkit
import jswebkit

我是 Python 新手。据我了解，webkit（用 C/C++ 编写）需要有 Python 包装器。我环顾四周，但找不到类似的东西。任何建议表示赞赏。

【问题讨论】：

标签： python webkit scrapy

【解决方案1】：

这是你可以从这里开始的最简单的例子

import gtk 
import webkit 

view = webkit.WebView() 

sw = gtk.ScrolledWindow() 
sw.add(view) 

win = gtk.Window(gtk.WINDOW_TOPLEVEL) 
win.add(sw) 
win.show_all() 

view.open("http://w3.org/") 
gtk.main()

您可以从这里了解更多信息http://code.google.com/p/pywebkitgtk/ 也看看这里 http://dvlabs.tippingpoint.com/blog/2011/11/28/malicious-content-harvesting

【讨论】：