ffmpegでハードウェアアクセラレーションを使用する方法 質問する

調査の結果、OS X (VDA) と Linux (VDPAU) で必要な HW アクセラレーション デコードを実装することができました。Windows 実装も入手したら、回答を更新します。では、最も簡単な方法から始めましょう。

Mac OS X

Mac OS で HW アクセラレーションを動作させるには、次の操作を行うだけです。avcodec_find_decoder_by_name("h264_vda");ただし、h264 ビデオをアクセラレーションできるのは Mac OS で FFmpeg を使用する場合のみであることに注意してください。

Linux VDPAU

Linux では、状況ははるかに複雑です (驚く人はいないでしょう)。Linux 上の FFmpeg には、VDPAU (Nvidia) と VAAPI (Intel) の 2 つの HW アクセラレータと、VDPAU 用の HW デコーダが 1 つだけあります。上記の Mac OS の例のように、vdpau デコーダを使用するのが合理的に思えるかもしれません。avcodec_find_decoder_by_name("h264_vdpau");

何も変化せず、まったく加速されないことに驚かれるかもしれません。これはまだ始まりに過ぎず、加速を機能させるにはさらに多くのコードを書く必要があるためです。幸いなことに、自分で解決策を考え出す必要はありません。それを実現する方法の良い例が少なくとも 2 つあります。libavgFFmpeg自体もそうです。libavgにはVDPAUDecoderクラスがあり、これは非常にわかりやすく、私の実装もこれに基づいています。ffmpeg_vdpau.c比較するための別の実装を取得します。ただし、私の意見では、libavg 実装の方が理解しやすいです。

前述の両方の例に欠けている唯一の点は、デコードされたフレームをメイン メモリに適切にコピーすることです。両方の例とも を使用し、VdpVideoSurfaceGetBitsYCbCrマシンで得られたパフォーマンスがすべて失われました。そのため、次の手順を使用して GPU からデータを抽出するとよいかもしれません。

bool VdpauDecoder::fillFrameWithData(AVCodecContext* context,
    AVFrame* frame)
{
    VdpauDecoder* vdpauDecoder = static_cast<VdpauDecoder*>(context->opaque);
    VdpOutputSurface surface;
    vdp_output_surface_create(m_VdpDevice, VDP_RGBA_FORMAT_B8G8R8A8, frame->width, frame->height, &surface);
    auto renderState = reinterpret_cast<vdpau_render_state*>(frame->data[0]);
    VdpVideoSurface videoSurface = renderState->surface;

    auto status = vdp_video_mixer_render(vdpauDecoder->m_VdpMixer,
        VDP_INVALID_HANDLE,
        nullptr,
        VDP_VIDEO_MIXER_PICTURE_STRUCTURE_FRAME,
        0, nullptr,
        videoSurface,
        0, nullptr,
        nullptr,
        surface,
        nullptr, nullptr, 0, nullptr);
    if(status == VDP_STATUS_OK)
    {
        auto tmframe = av_frame_alloc();
        tmframe->format = AV_PIX_FMT_BGRA;
        tmframe->width = frame->width;
        tmframe->height = frame->height;
        if(av_frame_get_buffer(tmframe, 32) >= 0)
        {
            VdpStatus status = vdp_output_surface_get_bits_native(surface, nullptr,
                reinterpret_cast<void * const *>(tmframe->data),
                reinterpret_cast<const uint32_t *>(tmframe->linesize));
            if(status == VDP_STATUS_OK && av_frame_copy_props(tmframe, frame) == 0)
            {
                av_frame_unref(frame);
                av_frame_move_ref(frame, tmframe);
                return;
            }
        }
        av_frame_unref(tmframe);
    }
    vdp_output_surface_destroy(surface);
    return 0;
}