0

JPEG 形式を使用して Mac 画面をキャプチャし、キャプチャした JPEG サンプルバッファの pixelBuffer と imageBuffer を取得します。しかし、pixelBuffer は常に nil ですが、JPEG バッファを NSImage に変換すると、画像を取得して正常に表示できます。

-(void)createSession
{
if(self.session == nil)
        {
            self.session = [[AVCaptureSession alloc] init];
            self.session.sessionPreset = AVCaptureSessionPresetPhoto;
            CGDirectDisplayID displayId = [self getDisplayID];

            self.input = [[AVCaptureScreenInput alloc] initWithDisplayID:displayId];

            [self.session addInput:self.input];

            self.imageOutput = [[AVCaptureStillImageOutput alloc] init];

            NSDictionary *outputSettings = @{AVVideoCodecKey : AVVideoCodecJPEG};

            [self.imageOutput setOutputSettings:outputSettings];

            [self.session addOutput:self.imageOutput];

            [self.session startRunning];
        }
}



-(void)processSampleBuffer
{
AVCaptureConnection *videoConnection = nil;
    for (AVCaptureConnection *connection in self.imageOutput.connections) {
        for (AVCaptureInputPort *port in [connection inputPorts]) {
            if ([[port mediaType] isEqual:AVMediaTypeVideo] ) {
                videoConnection = connection;
                break;
            }
        }
        if (videoConnection) { break; }
    }

    [self.imageOutput captureStillImageAsynchronouslyFromConnection:videoConnection completionHandler:^(CMSampleBufferRef imageDataSampleBuffer, NSError *  error) {
        if(imageDataSampleBuffer != nil)
        {
            NSData * imageData = [AVCaptureStillImageOutput jpegStillImageNSDataRepresentation:imageDataSampleBuffer];
            self.image = [[NSImage alloc] initWithData:imageData];

            CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(imageDataSampleBuffer);
            CVPixelBufferLockBaseAddress(imageBuffer,0);

            size_t width = CVPixelBufferGetWidth(imageBuffer);
            size_t height = CVPixelBufferGetHeight(imageBuffer);

            NSLog(@"width %zu height %zu", width,height);

             CVPixelBufferRef pixelBuffer = CMSampleBufferGetImageBuffer(imageDataSampleBuffer);
            float width1 = CVPixelBufferGetWidth(pixelBuffer);
            float height1 = CVPixelBufferGetHeight(pixelBuffer);

             NSLog(@"Pixelbuffer width %f height %f", width1,height1);

        }
        else
        {
            NSLog(@"error");
        }

    }];
}

processSampleBuffer では、self.image は NSImage を取得して NSImageView に正常に表示できます。しかし、imageBuffer と pixelBuffer は両方とも nil です。

それは私をとても混乱させました、誰かが見てくれるのを手伝ってくれますか？

4

1 に答える 1

0

OK、最後に、ここで答えを見つけました。他の人に役立つことを願っています.

https://developer.apple.com/documentation/avfoundation/avcapturephoto/2873914-pixelbuffer?language=objc

討論

RAW 形式、または TIFF などの圧縮なしで処理された形式で写真のキャプチャを要求した場合は、このプロパティを使用して、基になるサンプル バッファーにアクセスできます。

JPEG や HEVC/HEIF などの圧縮形式でのキャプチャを要求した場合、このプロパティの値は nil です。圧縮された画像データを取得するには、fileDataRepresentation または CGImageRepresentation メソッドを使用します。

于 2019-01-19T02:11:17.250 に答える