Java Http(s)URLConnection java.io.IOException：服务器返回 HTTP 响应代码：403

Question

java.io.IOException：服务器返回 HTTP 响应代码：403 for http://www.budgetbottle.com/vivino.xml

当通过 Java 类 main 方法在本地 tomcat 服务器上运行时，此 URL 有效（返回内容），但在生产机器上的 tomcat 服务器上运行时抛出错误。

代码如下：

URL url = new URL("http://www.budgetbottle.com/vivino.xml");    
HttpURLConnection urlcon = (HttpURLConnection) url.openConnection();
urlcon.addRequestProperty("User-Agent", "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36");
// System.setProperty("http.agent", "");
System.setProperty("http.agent", "Chrome");

// urlcons.setRequestProperty("Content-Language", "en-US");
// urlcons.setUseCaches(false);
// urlcons.setDoInput(true);
// urlcons.setDoOutput(true);

我已经应用了该论坛上提出的类似问题提供的解决方案，但没有解决方案。

更新：
我刚刚注意到，wget 实用程序也会在生产系统中引发相同的错误，而在本地系统中没有问题。请注意使用了 User-Agent 等选项

这是系统特定的错误吗？

Answer 1

可能是您的生产服务器以某种方式限制了网络连接（所有 http/https 连接尝试都重定向到返回“访问被拒绝”的强制代理）？

您是否能够从您的生产环境访问任何其他外部站点？

Answer 2

生产服务器很可能在 Apache HTTPD 服务器后面运行，该服务器将请求代理到 Tomcat 服务器。这种设置在某些部署中受到青睐，原因如下：

• 它允许将应用程序的静态服务元素复制到 Apache HTTPD 处理端，其中 Apache HTTPD 在从磁盘提供静态文件方面通常比 Tomcat 快得多。
• 它只允许转发“有效”请求，从而减少 Tomcat 的负载。
• 它允许不转发任何可能重新配置 Tomcat 中的应用程序部署或配置的请求，即使有人意外部署了 Tomcat 的 Web 管理工具
• 只要请求来自一组受信任的 Internet 地址，就可以使用 Web 管理工具。

还有很多系统管理员可能感兴趣的附加项目，促使他们在 Apache HTTPD 后面部署 Tomcat。

在至少一种情况下，它还可能允许 Apache HTTPD 在将请求转发到 Tomcat 之前在 HTTPD 层进行质询和响应身份验证。

在继续之前，您需要更好地了解您的生产部署。然后您需要尝试在您的开发环境中更准确地重新创建它。

Answer 3

我使用了下面的代码，对我来说效果很好。您的服务器上是否有某种速率限制或 IP 禁止系统，可能会阻止您的连接？

    URL url = new URL("http://www.budgetbottle.com/vivino.xml");
    HttpURLConnection urlcon = (HttpURLConnection) url.openConnection();
    urlcon.addRequestProperty("User-Agent", "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36");
    System.setProperty("http.agent", "Chrome");
    BufferedReader reader = new BufferedReader(new InputStreamReader(urlcon.getInputStream()));
    StringBuilder sb = new StringBuilder();
    String line = null;
    while ((line = reader.readLine()) != null)
    {
        sb.append(line + "\n");
    }
    System.out.println(sb.toString());