如何在屏幕捕获程序中使用 Java 获得超过 30FPS？

Question

我目前正在使用 Java 中的 Robot 类来记录屏幕。但是，它没有达到每秒 30 帧的最小值。我没有重新创建对象，并且尽可能高效，但我平均每秒只有 15 帧左右。机器人根本没有切割它。

我可以使用什么来捕获屏幕？我已经尝试过 Xuggle，但我似乎也无法以足够快的速度捕捉它。

Answer 1

对于遵循 X11 标准的操作系统（Linux、FreeBSD、Solaris 等），我们可以通过JavaCV 和FFmpeg 这样做：

import com.googlecode.javacv.*;

public class ScreenGrabber {
    public static void main(String[] args) throws Exception {
        int x = 0, y = 0, w = 1024, h = 768; // specify the region of screen to grab
        FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(":0.0+" + x + "," + y);
        grabber.setFormat("x11grab");
        grabber.setImageWidth(w);
        grabber.setImageHeight(h);
        grabber.start();

        CanvasFrame frame = new CanvasFrame("Screen Capture");
        while (frame.isVisible()) {
            frame.showImage(grabber.grab());
        }
        frame.dispose();
        grabber.stop();
    }
}

我不了解 Windows 或 Mac OS X，但我怀疑我们需要直接访问本机 API。不过，JavaCPP 可以提供帮助。

Answer 2

基于@Samuel 的回答，根据官方ffmpeg documentation，如果您将file 参数传递给FFmpegFrameGrabber（这实际上是一个input 参数作为 -i 选项传递给 ffmpeg）遵循 different formats each device expects。

即：

对于 Windows：dshow 需要 -i video="screen-capture-recorder"

对于 OSX：avfoundation 期望 -i "<screen device index>:"

对于 Linux：x11grab 需要 -i :<display id>+<x>,<y>。

因此，只需将这些值（-i 的参数）传递给构造函数并相应地设置格式（通过 setFormat）就可以解决问题：

例子：

对于 Windows：

new FFmpegFrameGrabber("video=\"screen-capture-recorder\"")
    .setFormat("dshow");

对于 OSX：

new FFmpegFrameGrabber("\"<screen device index>:\"")
    .setFormat("avfoundation");

对于 Linux：

new FFmpegFrameGrabber(":<display id>+<x>,<y>")
    .setFormat("x11grab");

PS：尚未对此进行全面测试，因此不确定引号是否真的必要。