Блог

Я снимаю видео и выполняю некоторые анализы в captureOutput:(AVCaptureOutput *)output didOutputSampleBuffer delegate. но через короткое время этот метод не вызывается. затем вызывается captureOutput:(AVCaptureOutput *)output didDropSampleBuffer делегат.

Когда я ничего не делаю в didOutputSampleBuffer, все в порядке.
Я запускаю модель тензорного потока в этом делегате. И это вызывает проблему.

Проблема:
Проблема в том, что при didDropSampleBuffer вызове didOutputSampleBuffer больше не вызывается.

Мое решение:
Моим решением была остановка и запуск AVCaptureSession. но это привело к дополнительному использованию памяти! Что в конечном итоге привело к сбою моего приложения.

  - (void)captureOutput:(AVCaptureOutput *)output didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection
    {
        // ******  do heavy work in this delegate *********
        graph = [TensorflowGraph new];
        predictions = [graph runModelOnPixelBuffer:pixelBuffer orientation: UIDeviceOrientationPortrait CardRect: _vwRect];
    }

    - (void)captureOutput:(AVCaptureOutput *)output didDropSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection
    {
                CFTypeRef droppedFrameReason = CMGetAttachment(sampleBuffer, kCMSampleBufferAttachmentKey_DroppedFrameReason, NULL);
                NSLog(@"dropped frame, reason: %@", droppedFrameReason);
    }
  

—-> отброшенный кадр, причина: OutOfBuffers

Согласно [https://developer.apple.com/library/archive/technotes/tn2445/_index.html ]:

Это условие обычно вызывается тем, что клиент слишком долго удерживает буферы, и его можно устранить, вернув буферы поставщику.

Как я могу вернуть буфер поставщику?

Отредактировано

После выполнения 11 раз этой CGImageRef cgImage = [context createCGImage:resized fromRect:resized.extent]; строки вызывается didDropSampleBuffer . комментирование CFRelease(pixelBuffer) не имеет никакого значения в результате. Означает ли это, что PixelBuffer не выпущен?

 CFRetain(pixelBuffer);
CVPixelBufferLockBaseAddress(pixelBuffer, kCVPixelBufferLock_ReadOnly);

CIImage* ciImage = [[CIImage alloc] initWithCVPixelBuffer:pixelBuffer];
ciImage = [ciImage imageByCroppingToRect:cropRect];

CGAffineTransform transform = CGAffineTransformIdentity;
CGFloat angle = 0.0;

transform = CGAffineTransformRotate(transform, angle);
CIImage* resized = [ciImage imageByApplyingTransform:transform];

CIContext *context = [CIContext contextWithOptions:nil];

CGImageRef cgImage = [context createCGImage:resized fromRect:resized.extent]; // *********************************

UIImage* _res = [[UIImage alloc] initWithCGImage:cgImage];


CFRelease(pixelBuffer);
  

1