带有飞溅的scrapy javascript不会呈现页面

Question

我想爬this page，我跟着this post爬了它，但它没有呈现网页。
我该如何解决？
我用这个：

scrapy shell 'http://localhost:8050/render.html?url=https://shenoto.com/album
/46321?lang=en&timeout=10&wait=0.5'

很简单

response.body

但它没有呈现页面。并在页面中仅显示 javascripts。
实际上我想抓取该网站的“application/ld+json”部分，如下图所示。

image

最好的问候

Answer 1

我找到了this post 并修复了渲染问题。

和this post 加载ld-json。