python gdata youtube评论提要无法检索超过150条评论答案

【问题标题】：python gdata youtube comments feed unable to retrieve more than 150 commentspython gdata youtube评论提要无法检索超过150条评论
【发布时间】：2014-05-14 14:35:20
【问题描述】：

我正在使用 python 的 gdata 模块来提取 youtube 视频的 cmets，但我遇到了一些问题，它适用于相对不太流行的视频（没有很多 cmets 的视频），但任何视频都有更多cmets，将返回一个错误的请求错误。

gdata.service.RequestError: {'status': 400, 'body': 'Invalid value for parameter: video-id', 'reason': 'Bad Request'}

这是我的功能：

def getComments(client, video_id):
    comment_feed = client.GetYouTubeVideoCommentFeed(video_id=video_id)
    while comment_feed is not None:
        for comment in comment_feed.entry:
             yield comment
        next_link = comment_feed.GetNextLink()
        if next_link is None:
             comment_feed = None
        else:
             comment_feed = client.GetYouTubeVideoCommentFeed(next_link.href)

有人知道如何解决这个问题吗？

编辑：

所以我决定尝试另一种方法，这就是我得到的：

from gdata.youtube import service

comment_feed_url = "http://gdata.youtube.com/feeds/api/videos/%s/comments?max-results=50"
USERNAME = ''
PASSWORD = ''

''' Get the comment feed of a video given a video_id'''
def WriteCommentFeed(video_id):
    client = service.YouTubeService()
    client.ClientLogin(USERNAME, PASSWORD)
    url = comment_feed_url % video_id
    comment_feed = client.GetYouTubeVideoCommentFeed(uri=url)
    allComments = []
    while comment_feed:

        for comment_entry in comment_feed.entry:
            allComments.append(comment_entry.content.text)

        print len(allComments)
        print comment_feed.GetNextLink().href
        comment_feed = client.Query(comment_feed.GetNextLink().href)

if __name__ == "__main__":
    WriteCommentFeed("5DdzE4k31fM")

而且它似乎在 150 cmets 处突破，所以在查询第 200 条评论时，我收到了这个错误：

'reason': server_response.reason, 'body': result_body}
gdata.service.RequestError: {'status': 414, 'body': '<!DOCTYPE html>\n<html lang=en>\n  <meta charset=utf-8>\n  <meta name=viewport content="initial-scale=1, minimum-scale=1, width=device-width">\n  <title>Error 414 (Request-URI Too Large)!!1</title>\n  <style>\n    *{margin:0;padding:0}html,code{font:15px/22px arial,sans-serif}html{background:#fff;color:#222;padding:15px}body{margin:7% auto 0;max-width:390px;min-height:180px;padding:30px 0 15px}* > body{background:url(//www.google.com/images/errors/robot.png) 100% 5px no-repeat;padding-right:205px}p{margin:11px 0 22px;overflow:hidden}ins{color:#777;text-decoration:none}a img{border:0}@media screen and (max-width:772px){body{background:none;margin-top:0;max-width:none;padding-right:0}}#logo{background:url(//www.google.com/images/errors/logo_sm_2.png) no-repeat}@media only screen and (min-resolution:192dpi){#logo{background:url(//www.google.com/images/errors/logo_sm_2_hr.png) no-repeat 0% 0%/100% 100%;-moz-border-image:url(//www.google.com/images/errors/logo_sm_2_hr.png) 0}}@media only screen and (-webkit-min-device-pixel-ratio:2){#logo{background:url(//www.google.com/images/errors/logo_sm_2_hr.png) no-repeat;-webkit-background-size:100% 100%}}#logo{display:inline-block;height:55px;width:150px}\n  </style>\n  <a href=//www.google.com/><span id=logo aria-label=Google></span></a>\n  <p><b>414.</b> <ins>That\xe2\x80\x99s an error.</ins>\n  <p>The requested URL <code>/feeds/api/videos/5DdzE4k31fM/comments</code>... is too large to process.  <ins>That\xe2\x80\x99s all we know.</ins>\n', 'reason': 'Request-URI Too Large'}

有人知道为什么吗？

【问题讨论】：

标签： python youtube gdata

【解决方案1】：

当尝试对具有大量 cmets 的视频的 cmets 进行分页时，API 会生成带有 length > 2048 字符的分页链接。所以你最终会看到一个 HTTP 414 错误页面。

为了让它发挥作用：

假设您提出以下请求：

http://gdata.youtube.com/feeds/api/videos/VIDEO_ID/comments

那么您的查询字符串参数之一应为：

orderby=published

例如：

"https://gdata.youtube.com/feeds/api/videos/" + _videoId + "/comments?orderby=published&max-results=50"

这样，API 根据时间而不是相关性来检索结果，这大概就是它生成的 start-token 短得多的原因。

希望这会有所帮助。

【讨论】：