FFMpeg Brak synchronizacji audio/wideo w aplikacji iOS

Question

Aplikacja zapisuje dane wyjściowe z kamery w pliku mov. plik, a następnie zmień go na format flv, który został wysłany przez AVPacket na serwer rtmp. Przełącza się za każdym razem między dwoma plikami, jeden jest zapisywany przez wyjście kamery, a drugi jest wysyłany. Mój problem polega na tym, że audio/wideo znika po pewnym czasie.

Pierwszy wysłany bufor jest zawsze w 100% zsynchronizowany, ale po pewnym czasie zostaje pomieszany. wierzę jej problem DTS-PTS ..

if(isVideo) 
{ 
    packet->stream_index = VIDEO_STREAM; 
    packet->dts = packet->pts = videoPosition; 
    videoPosition += packet->duration = FLV_TIMEBASE * packet->duration * videoCodec->ticks_per_frame * videoCodec->time_base.num/videoCodec->time_base.den; 

} 
else 
{ 
    packet->stream_index = AUDIO_STREAM; 
    packet->dts = packet->pts = audioPosition; 
    audioPosition += packet->duration = FLV_TIMEBASE * packet->duration/audioRate; 

    //NSLog(@"audio position = %lld", audioPosition); 
} 

packet->pos = -1; 
packet->convergence_duration = AV_NOPTS_VALUE; 

// This sometimes fails without being a critical error, so no exception is raised 
if((code = av_interleaved_write_frame(file, packet))) 
{ 
    NSLog(@"Streamer::Couldn't write frame"); 
} 
av_free_packet(packet); 

Answer 1

Można badać tę próbkę: http://unick-soft.ru/art/files/ffmpegEncoder-vs2008.zip

Ale ta próba jest dla systemu Windows.

W tym przykładzie używam pts tylko dla strumienia audio:

if (pVideoCodec->coded_frame->pts != AV_NOPTS_VALUE) 
    { 
    pkt.pts = av_rescale_q(pVideoCodec->coded_frame->pts, 
     pVideoCodec->time_base, pVideoStream->time_base); 
    } 

Answer 2

byłem przeżywa podobny problem podczas przełączania się z AVAssetWriters, i zauważył, że poszedł drogą gdybym tylko zaczęła używać nowego AVAssetWriter kiedy ma próbkę wideo

https://medium.com/@brandon.kobel/ios-seamless-video-chunks-4383a5a3a874