使用 Python 请求选择表单答案

【问题标题】：Using Python Requests to Select Forms使用 Python 请求选择表单
【发布时间】：2012-05-17 10:36:10
【问题描述】：

我想使用一个能够填写表单和处理重定向的python库：

“主页”页面有一个表单{'username':'user', 'password':'pass'}
“重定向”页面将我带到一个新页面
“新”页面有一个指向最终页面的链接
“最终”页面有一个表单{'Field 1':'Data 1', 'Field 2':'Data 2'}

我想进入“最终”页面并填写表格。我已经浏览了 SO 中的每篇文章 python-requests，阅读 API 文档和整个用户指南。

我已经能够使用 mechanize 填写“主页”页面表单：

import mechanize
# Fill out Log In form
br = mechanize.Browser()
br.open('http://www.yourfavoritesite.com')
br.select_form(nr=0)
br['username'] = 'user'
br['password'] = 'pass'
br.submit()

另外——在网页上禁用重定向后——我已经能够使用机械化来填写“新”页面表单：

# Click link
br.find_link(text='Admin')
req = br.click_link(text='Admin')
br.open(req)

# Fill out Final form
br.select_form(nr=0)
br['Field 1'] = 'Data 1'
br['Field 2'] = 'Data 2'
br.submit()

如果我不禁用重定向并且页面重定向，我没有进入“新”页面，当我尝试填写表单时会出现以下错误：

File "<stdin>", line 1, in <module>
File "/usr/local/lib/python2.7/dist-packages/mechanize/_mechanize.py", line 524, in select_form
     raise FormNotFoundError("no form matching "+description)
mechanize._mechanize.FormNotFoundError: no form matching nr 0

我听说 Python 请求非常简单，我想使用这个库，假设我可以做一些事情：

import requests
# Fill out Log In form
data = {'username':'admin', 'password':'pass'}
r = requests.get('http://www.yourfavoritesite.com', allow_redirects=True)
r = requests.put(r.url, data=data)

# Follow redirect to "new" page

# Click link
# I haven't heard of this feature in requests

# Fill out Final form
data = {'Field 1':'Data 1', 'Field 2':'Data 2'}
r = requests.put(r.url, data=data)

【问题讨论】：

我已经能够使用 Selenium WebDriver for Python 解决这个问题。我仍然对为什么 mechanize 在重定向页面上“挂起”感到困惑。

标签： python-requests python mechanize python-requests

【解决方案1】：

我知道这很旧，但我相信您从requests 寻找的答案（显然）不是get，而是post。

来自： http://docs.python-requests.org/en/latest/user/quickstart/#more-complicated-post-requests

>>> payload = {'key1': 'value1', 'key2': 'value2'}
>>> r = requests.post("http://httpbin.org/post", data=payload)
>>> print r.text
{
  ...
  "form": {
    "key2": "value2",
    "key1": "value1"
  },
  ...
}

【讨论】：