FFmpeg API H264编码的视频在所有平台上都无法播放

3

编辑:在之前的版本中,我使用了一个非常老的ffmpeg API。现在我使用最新的库。问题只是从“Main”变成了“High”。

我正在使用ffmpeg C API来创建C++中的mp4视频。

我希望生成的视频是“受限基线”配置文件,以便该视频可以在尽可能多的平台上播放,特别是移动设备,但是每次都得到“高”配置文件,即使我硬编码了编解码器配置文件为FF_PROFILE_H264_CONSTRAINED_BASELINE。结果会导致该视频在我们所有测试平台上无法播放。

这是“ffprobe video.mp4 -show_streams”显示有关我的视频流的信息:

  Metadata:
major_brand     : isom
minor_version   : 512
compatible_brands: isomiso2avc1mp41
creation_time   : 1970-01-01 00:00:00
encoder         : Lavf53.5.0
  Duration: 00:00:13.20, start: 0.000000, bitrate: 553 kb/s
Stream #0:0(und): Video: h264 (Main) (avc1 / 0x31637661), yuv420p, 320x180,
424 kb/s, 15 fps, 15 tbr, 15 tbn, 30 tbc
Metadata:
  creation_time   : 1970-01-01 00:00:00
  handler_name    : VideoHandler
Stream #0:1(und): Audio: aac (mp4a / 0x6134706D), 44100 Hz, stereo, s16, 12
kb/s
Metadata:
  creation_time   : 1970-01-01 00:00:00
  handler_name    : SoundHandler
-------VIDEO STREAM--------
[STREAM] 
index=0
codec_name=h264
codec_long_name=H.264 / AVC / MPEG-4 AVC / MPEG-4 part 10

profile=High <-- This should be "Constrained Baseline"

codec_type=video
codec_time_base=1/30
codec_tag_string=avc1
codec_tag=0x31637661
width=320
height=180
has_b_frames=0
sample_aspect_ratio=N/A
display_aspect_ratio=N/A
pix_fmt=yuv420p
level=30
timecode=N/A
is_avc=1
nal_length_size=4
id=N/A
r_frame_rate=15/1
avg_frame_rate=15/1
time_base=1/15
start_time=0.000000
duration=13.200000
bit_rate=424252
nb_frames=198
nb_read_frames=N/A
nb_read_packets=N/A
TAG:creation_time=1970-01-01 00:00:00
TAG:language=und
TAG:handler_name=VideoHandler
[/STREAM]
-------AUDIO STREAM--------
[STREAM]
index=1
codec_name=aac
codec_long_name=Advanced Audio Coding
profile=unknown
codec_type=audio
codec_time_base=1/44100
codec_tag_string=mp4a
codec_tag=0x6134706d
sample_fmt=s16
sample_rate=44100
channels=2
bits_per_sample=0
id=N/A
r_frame_rate=0/0
avg_frame_rate=0/0
time_base=1/44100
start_time=0.000000
duration=13.165714
bit_rate=125301
nb_frames=567
nb_read_frames=N/A
nb_read_packets=N/A
TAG:creation_time=1970-01-01 00:00:00
TAG:language=und
TAG:handler_name=SoundHandler
[/STREAM]

这是我用来添加视频流的函数。所有来自ptr->的值都是在外部定义的,这些值必须是特定的值才能获得正确的配置文件吗?
static AVStream *add_video_stream( Cffmpeg_dll * ptr, AVFormatContext *oc, enum   CodecID codec_id )
{
AVCodecContext *c;
AVStream *st;  
AVCodec* codec;

// Get correct codec
codec = avcodec_find_encoder(codec_id);
if (!codec) {
    av_log(NULL, AV_LOG_ERROR, "%s","Video codec not found\n");
    exit(1);
}

// Create stream
st = avformat_new_stream(oc, codec);
if (!st) {
    av_log(NULL, AV_LOG_ERROR, "%s","Could not alloc stream\n");
    exit(1);
}

c = st->codec;

/* Get default values */
codec = avcodec_find_encoder(codec_id);
if (!codec) {
    av_log(NULL, AV_LOG_ERROR, "%s","Video codec not found (default values)\n");
    exit(1);
}
avcodec_get_context_defaults3(c, codec);

c->codec_id = codec_id;
c->codec_type = AVMEDIA_TYPE_VIDEO;

c->bit_rate = ptr->video_bit_rate;
av_log(NULL, AV_LOG_ERROR, " Bit rate: %i", c->bit_rate);

    c->qmin = ptr->qmin;
    c->qmax = ptr->qmax;
    c->me_method = ptr->me_method;
    c->me_subpel_quality = ptr->me_subpel_quality;
    c->i_quant_factor = ptr->i_quant_factor;
    c->qcompress = ptr->qcompress;
    c->max_qdiff = ptr->max_qdiff;

    // We need to set the level and profile to get videos that play (hopefully) on all platforms
    c->level = 30;
    c->profile = FF_PROFILE_H264_CONSTRAINED_BASELINE;

c->width = ptr->dstWidth; 
c->height = ptr->dstHeight; 

c->time_base.den = ptr->fps;
c->time_base.num = 1;
c->gop_size = ptr->fps;
c->pix_fmt = STREAM_PIX_FMT;
c->max_b_frames = 0;

// some formats want stream headers to be separate
if(oc->oformat->flags & AVFMT_GLOBALHEADER)
    c->flags |= CODEC_FLAG_GLOBAL_HEADER;

return st;
}

附加信息:

作为参考视频,我使用Mozilla提供的gizmo.mp4作为跨平台/浏览器播放示例。它明确采用了“受限基线”配置文件,并且在我们所有测试的智能手机上都可以正常播放。您可以在这里下载该视频

我们自己创建的视频无法在所有平台上播放,我相信这是由于配置文件导致的。

此外,我正在使用qt-faststart.exe将头文件移动到创建mp4文件后的开头,因为直接在C++中进行此操作不太好。那可能是问题的原因吗?

显然我做了一些错误的操作,但我不知道具体是什么。感谢您提供任何提示;)


你应该在FFmpeg邮件列表上提交一个错误报告。这应该被标记为基线或基线约束,就像你期望的那样。 - SilverbackNet
我更新了我的ffmpeg版本,问题从“Main”变成了“High”配置文件。如果无法解决,@SilverbackNet会处理。 - TheSHEEEP
有趣的是,当您通过命令行使用ffmpeg.exe并设置“-vprofile baseline”时,它会正常工作。我们在ffmpeg.exe和我们使用的C库中使用相同的ffmpeg版本。 - TheSHEEEP
这意味着问题不在库本身,这是个好消息。你只需要查看ffmpeg(可执行文件)的源代码,看看他们如何成功地将h264设置为基准线。 - sashoalm
我尝试过,但理解ffmpeg源代码中到底发生了什么可能需要几周时间。肯定没有检查某个值是否为“基线”的检查(我用TextCrawler看了一下)。 - TheSHEEEP
1个回答

7

我有解决方案。在花费一些时间和在FFmpeg错误跟踪器中进行讨论以及浏览配置文件设置示例后,我终于找到了解决方案。

需要使用av_opt_set(codecContext->priv_data, "profile", "baseline"(或任何其他所需的配置文件),AV_OPT_SEARCH_CHILDREN)。

所以在我的情况下,代码应该是:

错误的:

// We need to set the level and profile to get videos that play (hopefully) on all platforms
c->level = 30;
c->profile = FF_PROFILE_H264_CONSTRAINED_BASELINE;

正确的:

// Set profile to baseline
av_opt_set(c->priv_data, "profile", "baseline", AV_OPT_SEARCH_CHILDREN);

完全不直观,与API的其余用法相反,但这是ffmpeg的哲学。你不需要理解它,只需要了解如何使用它 ;)


你为什么选择了profile baseline?是不是意味着使用profile constrained_baseline的视频在某些设备上无法正常播放? - dragonfly
“baseline” 实际上在生成的文件中变成了约束基线。 - TheSHEEEP
据我所知,baseline和constrained_baseline是h264的两个不同的配置文件。您有什么看法? - dragonfly
我同意你的观点,至少基线配置文件有不同的级别。但是正如我所说,将“基线”放入“配置文件”字段会生成一个受限制的基线文件。我从来没有过多关注它,因为它能够正常工作。 - TheSHEEEP

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接