オブジェクトとその他の既知のAPIYUV_420_888
を使用して、デバイスのカメラからフレームのストリームを取得するために、コードを構成しました。次に、これらのフレームをピクセル形式に変換し、この形式のフレームが特定の計算を実行することを期待するネイティブ関数を呼び出す必要があります。これは、フレームのバイトを再配置するためにイメージリーダー コールバック内で使用しているコードです。imageReader
camera2
NV21
ImageReader.OnImageAvailableListener readerListener = new ImageReader.OnImageAvailableListener() {
@Override
public void onImageAvailable(ImageReader mReader) {
Image image = null;
image = mReader.acquireLatestImage();
if (image == null) {
return;
}
byte[] bytes = convertYUV420ToNV21(image);
nativeVideoFrame(bytes);
image.close();
}
};
private byte[] convertYUV420ToNV21(Image imgYUV420) {
byte[] rez;
ByteBuffer buffer0 = imgYUV420.getPlanes()[0].getBuffer();
ByteBuffer buffer1 = imgYUV420.getPlanes()[1].getBuffer();
ByteBuffer buffer2 = imgYUV420.getPlanes()[2].getBuffer();
int buffer0_size = buffer0.remaining();
int buffer1_size = buffer1.remaining();
int buffer2_size = buffer2.remaining();
byte[] buffer0_byte = new byte[buffer0_size];
byte[] buffer1_byte = new byte[buffer1_size];
byte[] buffer2_byte = new byte[buffer2_size];
buffer0.get(buffer0_byte, 0, buffer0_size);
buffer1.get(buffer1_byte, 0, buffer1_size);
buffer2.get(buffer2_byte, 0, buffer2_size);
ByteArrayOutputStream outputStream = new ByteArrayOutputStream( );
try {
outputStream.write( buffer0_byte );
outputStream.write( buffer1_byte );
outputStream.write( buffer2_byte );
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
rez = outputStream.toByteArray( );
return rez;
}
しかし、結果のフレームが水平方向に「反転」する理由はわかりません。つまり、カメラを右に動かすと、説明したパッキング手順の後のフレームは、センサーが不自然な位置に配置されている場合のように、左に移動します。
私の言いたいことを理解していただければ幸いです
ありがとう、
JM