In che modo AVSampleBufferDisplayLayer visualizza H.264

Question

Desidero condividere le mie conoscenze che ho elaborato in alcuni giorni a riguardo. Non c'è molto da trovare al riguardo.

Sono ancora frizzante riguardo al suono. Commenti e suggerimenti sono i benvenuti. ;-)

Answer 1

qui il mio frammento di codice. Dichiararla

@property (nonatomic, retain) AVSampleBufferDisplayLayer *videoLayer; 

in un primo momento di impostazione del livello video

self.videoLayer = [[AVSampleBufferDisplayLayer alloc] init]; 
self.videoLayer.bounds = self.bounds; 
self.videoLayer.position = CGPointMake(CGRectGetMidX(self.bounds), CGRectGetMidY(self.bounds)); 
self.videoLayer.videoGravity = AVLayerVideoGravityResizeAspect; 
self.videoLayer.backgroundColor = [[UIColor greenColor] CGColor]; 

//set Timebase 
CMTimebaseRef controlTimebase; 
CMTimebaseCreateWithMasterClock(CFAllocatorGetDefault(), CMClockGetHostTimeClock(), &controlTimebase); 

self.videoLayer.controlTimebase = controlTimebase; 
CMTimebaseSetTime(self.videoLayer.controlTimebase, CMTimeMake(5, 1)); 
CMTimebaseSetRate(self.videoLayer.controlTimebase, 1.0); 

// connecting the videolayer with the view 

[[self layer] addSublayer:_videoLayer]; 

fornire i dati video per lo strato di

__block AVAssetReaderTrackOutput *outVideo = [AVAssetReaderTrackOutput assetReaderTrackOutputWithTrack:video outputSettings:dic]; 

if([assetReaderVideo startReading]) 
{ 
    [_videoLayer requestMediaDataWhenReadyOnQueue: assetQueue usingBlock: ^{ 
     while([_videoLayer isReadyForMoreMediaData]) 
     { 
      CMSampleBufferRef *sampleVideo = [outVideo copyNextSampleBuffer]; 

      [_videoLayer enqueueSampleBuffer:sampleVideo.data]; 
     } 
    }]; 
} 

Per ulteriori dettagli: la Sessione 513 nel WWDC 2014 è molto istruttiva.

Answer 2

Sto tentando di farlo ma trovo che non ci sono immagini sul livello AVSampleBufferDisplay.

creo i NALUnits da un flusso di byte crudo e passare l'IDR e fette non IDR utilizzando:

if ([avLayer isReadyForMoreMediaData]) { 
     [avLayer enqueueSampleBuffer:sampleBuffer]; 
} 

Non c'è stato di errore tornato da EnqueueSampleBuffer quindi può essere difficile scoprire dove sta andando sbagliato.