视频 – Windows Media Foundation使用IMFTransform将mp4电影帧

我发现你在理解Media Foundation时有些错误.您希望从MFVideoFormat_H264获取RGB格式的图像,但不使用解码器H264.您写道“我已经厌倦了使用IMFTransform类” – IMFTransform不是类.它是Transform COM对象的接口.您必须创建COM对象Media Foundation H264解码器. Microsoft软件H264解码器的CLSID是CLSID_CMSH264DecoderMFT.但是,从该解码器,您可以获得以下格式的输出图像：
输出类型

MFVideoFormat_I420

MFVideoFormat_IYUV

MFVideoFormat_NV12

MFVideoFormat_YUY2

MFVideoFormat_YV12

您可以从其中一个创建D3D11_TEXTURE2D.或者您可以从我的项目CaptureManager SDK中执行以下操作：

CComPtrCustom<IMFTransform> lColorConvert;

                if (!Result(lColorConvert.CoCreateInstance(__uuidof(CColorConvertDMO))))
                {
                    lresult = MediaFoundationManager::setInputType(
                        lColorConvert,lVideoMediaType,0);

                    if (lresult)
                    {
                        break;
                    }

                    DWORD lTypeIndex = 0;

                    while (!lresult)
                    {

                        CComPtrCustom<IMFMediaType> lOutputType;

                        lresult = lColorConvert->GetOutputAvailableType(0,lTypeIndex++,&lOutputType);

                        if (!lresult)
                        {


                            lresult = MediaFoundationManager::getGUID(
                                lOutputType,MF_MT_SUBTYPE,lSubType);

                            if (lresult)
                            {
                                break;
                            }

                            if (lSubType == MFVideoFormat_RGB32)
                            {
                                LONG lstride = 0;

                                MediaFoundationManager::getStrideForBitmapInfoHeader(
                                    lSubType,lWidth,lstride);

                                if (lstride < 0)
                                    lstride = -lstride;

                                lBitRate = (lHight * (UINT32)lstride * 8 * lNumerator) / lDenominator;

                                lresult = MediaFoundationManager::setUINT32(
                                    lOutputType,MF_MT_AVG_BITRATE,lBitRate);

                                if (lresult)
                                {
                                    break;
                                }


                                PROPVARIANT lVarItem;

                                lresult = MediaFoundationManager::getItem(
                                    *aPtrPtrInputMediaType,MF_MT_FRAME_RATE,lVarItem);

                                if (lresult)
                                {
                                    break;
                                }

                                lresult = MediaFoundationManager::setItem(
                                    lOutputType,lVarItem);

                                if (lresult)
                                {
                                    break;
                                }

                                (*aPtrPtrInputMediaType)->Release();

                                *aPtrPtrInputMediaType = lOutputType.detach();

                                break;
                            }
                        }
                    }
                }

您可以设置ColorConvertDMO,以便将H264解码器的输出格式转换为您所需的格式.

此外,您可以通过链接查看代码：videoInput.此代码从网络摄像头获取实时视频并将其解码为RGB.如果您更换mp4视频文件源上的网络摄像头源,您将获得接近您需要的解决方案.

问候