我正在尝试通过后台 IntentService 实现 Web Scraping，该 IntentService 会定期抓取网站，而不会在用户手机上显示视图。
有没有办法解决这个问题？
【问题讨论】：
标签： android android-activity android-webview web-scraping intentservice
您可以显示来自服务的 web 视图。下面的代码会创建一个您的服务可以访问的窗口。窗口不可见，因为大小为 0 x 0。
public class ServiceWithWebView extends Service {
@Override
public void onCreate() {
super.onCreate();
WindowManager windowManager = (WindowManager) getSystemService(WINDOW_SERVICE);
params = new WindowManager.LayoutParams(WindowManager.LayoutParams.WRAP_CONTENT, WindowManager.LayoutParams.WRAP_CONTENT, WindowManager.LayoutParams.TYPE_SYSTEM_OVERLAY, WindowManager.LayoutParams.FLAG_NOT_TOUCHABLE, PixelFormat.TRANSLUCENT);
params.gravity = Gravity.TOP | Gravity.LEFT;
params.x = 0;
params.y = 0;
params.width = 0;
params.height = 0;
LinearLayout view = new LinearLayout(this);
view.setLayoutParams(new RelativeLayout.LayoutParams(RelativeLayout.LayoutParams.MATCH_PARENT, RelativeLayout.LayoutParams.MATCH_PARENT));
WebView wv = new WebView(this);
wv.setLayoutParams(new LinearLayout.LayoutParams(LinearLayout.LayoutParams.MATCH_PARENT, LinearLayout.LayoutParams.MATCH_PARENT));
view.addView(wv);
wv.loadUrl("http://google.com");
windowManager.addView(view, params);
}
}
这也需要android.permission.SYSTEM_ALERT_WINDOW 权限。
【讨论】：
如果我错了，请纠正我，但这个问题的正确答案是，当用户在手机上做其他事情而不通过 Activity 中断用户时，不可能在后台使用 WebView。
我已经应用了 Randy 和 Code_Yoga 的建议：使用带有“Theme.NoDisplay”的活动来启动带有 WebView 的后台服务来做一些工作。然而，即使没有可见的视图，在启动服务的那一秒切换到该活动也会中断用户（例如暂停正在玩的正在运行的游戏）。
对我的应用来说完全是灾难性的消息，所以我仍然希望有人能给我一种方法来使用不需要 Activity 的 WebView（或可以完成相同任务的 WebView 的替代品）
【讨论】：
您可以使用它来隐藏 Activity
<activity android:name="MyActivity"
android:label="@string/app_name"
android:theme="@android:style/Theme.NoDisplay">
这样做会阻止应用显示任何活动。 然后你就可以在 Activity 中做你的事情了。
【讨论】：
解决方案是这样的，但使用 Looper.getMainLooper() ：
@Override
public void onCreate() {
super.onCreate();
//HandlerThread thread = new HandlerThread("ScreenshotService", Process.THREAD_PRIORITY_BACKGROUND);
//thread.start();
//mServiceHandler = new ServiceHandler(thread.getLooper()); // not working
mServiceHandler = new ServiceHandler(Looper.getMainLooper()); // working
}
在@JonasCz 的帮助下：https://stackoverflow.com/a/28234761/466363
【讨论】：
我使用以下代码解决了这个问题：
Handler handler = new Handler(Looper.getMainLooper());
try
{
handler.post(
new Runnable()
{
@Override
public void run()
{
ProcessRequest(); // Where this method runs the code you're needing
}
}
);
} catch (Exception e)
{
e.printStackTrace();
}
【讨论】：
WebView 不能存在于 Activity 或 Fragment 之外，因为它是 UI。 但是，这意味着只需要一个 Activity 来创建 WebView，而不是处理它的所有请求。
如果您在主 Activity 中创建不可见的 WebView 并使其可从静态上下文访问，您应该能够从任何地方在后台视图中执行任务，因为我相信所有 WebView 的 IO 都是异步完成的。
要消除这种全局访问的麻烦，您始终可以启动一个引用 WebView 的服务来完成您需要的工作。
【讨论】：
或者替代一个可以完成相同功能的WebView
【讨论】：
您为什么不创建一个后端服务来为您进行抓取？
然后您只需轮询来自 RESTful Web 服务的结果，甚至使用消息传递中间件（例如 ZeroMQ）。
如果它适合您的用例，可能会更优雅：让抓取服务通过 GCM 发送您的应用推送消息 :)
【讨论】：
我不确定这是否是解决给定问题的灵丹妙药。 根据@Pierre 接受的答案（对我来说听起来是正确的）
没有办法在后台使用 WebView 而 用户正在电话上做其他事情而不会打断用户 通过 Activity。
因此，我认为必须进行一些架构/流程/策略更改才能解决此问题。
建议的解决方案 #1： 而不是从服务器获取推送通知并运行后台作业，然后运行一些 JS 代码或 WebView。相反，每当用户启动应用程序时，都应该查询后端服务器以了解是否需要执行任何 scraping。并且在后台输入的基础上，android客户端可以运行JS代码或WebView并将结果传回服务器。
我还没有尝试过这个解决方案。但希望是可行的。
这也将解决 cmets 中所述的以下问题：
这是因为后端将被检测为从同一 IP 抓取的机器人并被阻止（除了在不同页面上进行大量抓取所需的后端资源之外）。
数据可能在一段时间内不可用（直到某些用户为您抓取它）。但我们可以肯定地使用这种策略为最终用户提供更好的用户体验。
【讨论】：