尝试将抓取的 Web 数据保存到文本文件时出错

Question

我是新手，最近开始使用 Python。我正在尝试将检索到的 Twitter 关注者从网络保存到文本文件，但它不起作用。

这是我的代码：

for twusernames in driver.find_elements_by_xpath('//div[@aria-label="Timeline: Followers"]//a[@role="link"]'):
    print(twusernames.get_property('href'))
    file = open('links.txt', 'w')
    file.write(twusernames.get_property('href'))
    file.close()

我做错了什么？ :( 感谢您的帮助。

Answer 1

这应该可行：

with open('links.txt', 'w') as file
for twusernames in driver.find_elements_by_xpath('//div[@aria-label="Timeline: Followers"]//a[@role="link"]'):
    content = twusernames.get_property('href')
    print(content)
    file.write(content)
file.close()

Answer 2

试试这个。

with open('links.txt', 'w') as file
    file.write(twusernames.get_property('href'))
    file.close()

Answer 3

get_attribute()

get_attribute() 获取元素的给定属性或属性。此方法首先尝试返回具有给定名称的属性的值。如果具有该名称的属性不存在，则它返回具有相同名称的属性的值。如果没有具有该名称的属性，则返回 None。被认为是真实的值，即等于“真”或“假”，作为布尔值返回。所有其他非None 值都作为字符串返回。对于不存在的属性或属性，返回None。要获取属性或属性的确切值，您还可以使用get_dom_attribute() 或get_property() 方法。

此外，一旦您打开file_handle，您需要将其关闭。但是，作为 I/O 操作的文件操作必须尽可能少。因此，您优化的代码块将是：

• 使用get_attribute()：

  file = open("links.txt", "w")
  for twusernames in driver.find_elements_by_xpath('//div[@aria-label="Timeline: Followers"]//a[@role="link"]'):
      file.write(twusernames.get_attribute("href") + "\n")
  file.close()
  

• 使用get_property()：

  file = open("links.txt", "w")
  for twusernames in driver.find_elements_by_xpath('//div[@aria-label="Timeline: Followers"]//a[@role="link"]'):
      file.write(twusernames.get_property("href") + "\n")
  file.close()
  

• 使用get_dom_attribute()：

  file = open("links.txt", "w")
  for twusernames in driver.find_elements_by_xpath('//div[@aria-label="Timeline: Followers"]//a[@role="link"]'):
      file.write(twusernames.get_dom_attribute("href") + "\n")
  file.close()