android Media Source 在 jni 代码中未被识别为类

Question

我正在尝试使用androidndk 开发简单的decoder/player 应用程序。我使用androidsdk 创建了一个项目，然后我在我的项目目录中创建了一个名为jni 的文件夹。 在 jni 目录中，我创建了一个 omx.cpp 文件，我想在其中编写自己的类，它从 stagefright 继承 Android MediaSource。我还在我的项目中包含了 stagefright 头文件。我正在加载 @987654331 @ 在我的omx.cpp 文件中使用 dlopen。

我使用的代码如下：

using android::sp;

namespace android
{

class ImageSource : public MediaSource {
public:
ImageSource(int width, int height, int colorFormat)
: mWidth(width),
  mHeight(height),
  mColorFormat(colorFormat)
 {

  }

public:
int mWidth;
int mHeight;
int mColorFormat;

 virtual status_t start(MetaData *params = NULL) {}

 virtual status_t stop() {}

 // Returns the format of the data output by this media source.
 virtual sp<MetaData> getFormat() {}

 virtual status_t read(
    MediaBuffer **buffer, const MediaSource::ReadOptions *options) {
 }

/*protected:
virtual ~ImageSource() {}*/
};



void Java_com_exampleomxvideodecoder_MainActivity(JNIEnv *env, jobject obj, jobject    surface)
{

    void *dlhandle;

    dlhandle = dlopen("d:\libstagefright.so", RTLD_NOW);
    if (dlhandle == NULL)  {
        printf("Service  Not Found:  %s\n", dlerror());
    }
    int width = 720;
    int height = 480;
    int colorFormat = 0;

    sp<MediaSource> img_source = new ImageSource(width, height, colorFormat);

    sp<MetaData> enc_meta = new MetaData;
   // enc_meta->setCString(kKeyMIMEType, MEDIA_MIMETYPE_VIDEO_H263);
   // enc_meta->setCString(kKeyMIMEType, MEDIA_MIMETYPE_VIDEO_MPEG4);
   enc_meta->setCString(kKeyMIMEType, MEDIA_MIMETYPE_VIDEO_AVC);
   enc_meta->setInt32(kKeyWidth, width);
   enc_meta->setInt32(kKeyHeight, height);
   enc_meta->setInt32(kKeySampleRate, kFramerate);
   enc_meta->setInt32(kKeyBitRate, kVideoBitRate);
   enc_meta->setInt32(kKeyStride, width);
   enc_meta->setInt32(kKeySliceHeight, height);
   enc_meta->setInt32(kKeyIFramesInterval, kIFramesIntervalSec);
   enc_meta->setInt32(kKeyColorFormat, colorFormat);


   sp<MediaSource> encoder =
       OMXCodec::Create(
               client.interface(), enc_meta, true, image_source);

   sp<MPEG4Writer> writer = new MPEG4Writer("/sdcard/screenshot.mp4");
   writer->addSource(encoder);

   // you can add an audio source here if you want to encode audio as well

   sp<MediaSource> audioEncoder =
   OMXCodec::Create(client.interface(), encMetaAudio, true, audioSource);
   writer->addSource(audioEncoder);

   writer->setMaxFileDuration(kDurationUs);
   CHECK_EQ(OK, writer->start());
   while (!writer->reachedEOS()) {
       fprintf(stderr, ".");
       usleep(100000);
   }
   err = writer->stop();
}
}

我有以下疑问：

1.在jni函数中，如果我们创建一些类对象并使用它们来调用MediaSource类的函数，或者我们必须创建单独的.cpp和.h文件。如果我们使用单独的文件如何我们是否从 jni 函数中调用/引用它。

2.这是制作我们自己的继承自MediaSource类的包装类的正确方法还是有其他方法。

基本上我想制作一个应用程序，它需要.mp4/.avi 文件，demux 它分离音频/视频，解码和渲染/播放它只使用android stagefright 和OpenMAX。

如果建议使用ffmpeg 作为源，demuxing 那么如何将其与android st agefright 框架集成。

问候

Answer 1

要回答您的第一个问题，是可以在同一源文件中定义class 并在下面的函数中实例化它。我认为对于这种实现来说最好的例子是recordVideo 实用程序的DummySource，它可以在cmds 目录中找到。

但是，您的文件应直接或间接包含 MediaSource.h 文件，如上述示例中所示。

第二个问题更多是实施选择或宗教信仰。对于某些开发人员来说，定义一个新类并从 MediaSource 继承可能是您在示例中尝试过的正确方法。

还有一个替代实现，您可以在其中创建源并将类型转换为MediaSoure 强指针，如下例所示。

<sp><MediaSource>   mVideoSource;
mVideoSource = new ImageSource(width, height, colorformat);

其中ImageSource 实现start 和read 方法。我觉得上面recordVideo 的例子是一个很好的参考。

关于最后一段，我将回复您的其他查询，但我觉得您的目标和代码之间存在根本不匹配。目标是创建一个parser 或MediaExtractor 和一个相应的decoder，但上面的代码是实例化一个ImageSource，我认为它会给出YUV 帧并在您传递@987654343 时创建一个encoder @ 用于编码器创建。

我还将在另一个线程的NDK 可能性上添加更多 cmets。