如何正确地从网站获取 cookie？

Question

当我从集成开发环境运行它时，我的代码可以正确地从站点接收 cookie 并将其保存在一个文件中：

String url = "https://www.avito.ru";
Map<String, String> cookies = Jsoup.connect(url).execute().cookies();
ObjectOutputStream out = new ObjectOutputStream(new FileOutputStream(file));
out.writeObject(cookies);
System.out.println("Get cookies from: " + url + " and write into: " + file.getName());
System.out.println(cookies);
out.close();

但是当我在 Heroku 服务器上上传并运行它时（但此时我暂时将 cookie 存储在处理程序对象中），我在日志中收到错误消息。 它发生在步骤 .execute() 处。 Heroku 代码：

try {
       Map <String, String> cookies = Jsoup.connect(url)
                                    .execute()
                                    .cookies();
       cookieHandler.setAvitoCookies(cookies);
       System.out.println("> AVITO COOKIE:" + cookies); 
    } catch (IOException e) {
        e.printStackTrace();
    }

Heroku 错误日志：

org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403, URL=https://www.avito.ru

有没有办法正确获取cookies？

Answer 1

您收到HttpStatusException，因为服务器返回了 403 状态代码。如果您想从错误响应（4xx - 5xx 状态码）中读取 cookie，请添加 ignoreHttpErrors(true) 方法：

Map <String, String> cookies = Jsoup.connect(url)
                                    .ignoreHttpErrors(true)
                                    .execute()
                                    .cookies();