无法从 Scrapy Items.py 文件中导入字段对象

Question

我正在尝试使用以下导入语句将字段引入Scrapy 蜘蛛：

from test.items import fixture

在这种情况下，test.py 是一个 Scrapy 脚本，包含在文件夹路径中：

C:\Python27\mrscrap\mrscrap\spiders\test.py

文件 Items.py 比它高一级，包含在文件夹路径中：

C:\Python27\mrscrap\mrscrap\items.py

这行代码产生了错误：

No module named items

我在逻辑'test.items' 中使用了正确的文件名吗？我的文件items.py 是否在正确的位置？

我的完整代码是这样的：

from scrapy.spider import Spider
from scrapy.http import Request
from mrscrap.items import Fixture
from scrapy.utils.markup import remove_tags
from scrapy.cmdline import execute
import re

class GoalSpider(Spider):
    name = "goal"
    allowed_domains = ["whoscored.com"]
    start_urls = (
        'http://www.whoscored.com/',
        )

    def parse(self, response):
        return Request(
            url="http://www.whoscored.com/Players/3859/Fixtures/Wayne-Rooney",
            callback=self.parse_fixtures
        )

    def parse_fixtures(self,response):
        sel = response.selector
        for tr in sel.css("table#player-fixture>tbody>tr"):
             item = Fixture()
             item['tournament'] = tr.xpath('td[@class="tournament"]/span/a/text()').extract()
             item['date'] = tr.xpath('td[@class="date"]/text()').extract()
             item['team home'] = tr.xpath('td[@class="team home "]/a/text()').extract()
             yield item

execute(['scrapy','crawl','goal'])

Items.py 中的类是这样写的：

class Fixture(Item):
    tournament = Field()
    date = Field()
    team_home = Field()   

谢谢

Answer 1

一般scrapy项目的第一个答案，您可以在其中运行scrapy命令

有点难以理解test 所引用的内容，因为您的项目似乎被命名为mrscrap。如果您尝试从 items.py 文件导入 fixture 引用，则语句应为：

from mrscrap.items import fixture

这需要__init__.py 文件存在于mrscrap\ 中，但在使用scrapy 创建项目后默认情况下它应该存在。

直接从其目录运行爬虫（如更新）

您可以通过相对导入来做到这一点，如PEP 328 所示。

from ..items import fixture

这要求您处于当前活动的包中，因此您的蜘蛛目录中必须有一个 __init__.py 文件（虽然是空的）。