5

Nカメラ フレームをバッファリングするアプリを構築しています。ユーザーがボタンをタップすると、保存されたすべてのフレームを使用して写真が保存され、エフェクトが適用されます。

写真を保存し、 AsyncTaskでフレームを処理しています。実行すると、画面からすべてを削除し、TextViewだけを残して、写真の保存の進行状況を表示します。

現在、AsyncTask doInBackgroundは次のようになっています。

protected Void doInBackground(Integer... params) 
{
    int w = mBuffer.get(0).getWidth();
    int h = mBuffer.get(0).getHeight();
    int lineHeight = h / mBuffer.size();
    int currentHeight = 0;

    Log.d("output", "saving photo "+w+", "+h);

    for (int i = 0; i < mBuffer.size(); i++)
    {
        YuvImage image = mBuffer.get(i);
        ByteArrayOutputStream out = new ByteArrayOutputStream();
        if (!image.compressToJpeg(new Rect(0, currentHeight, w, lineHeight), 50, out))
        {
            Log.d("output", "problem converting yuv to jpg");
            break;
        }

        currentHeight += lineHeight;

        Log.d("output", "currentHeight: "+currentHeight);

        publishProgress((int)((i / (float)mBuffer.size()) * 100));
        try
        {
            out.flush();
            out.close();
            out = null;
        }
        catch(Exception e)
        {

        }

        System.gc();

        try
        {
            Thread.sleep(200);
        }
        catch(Exception e)
        {

        }

        if (isCancelled())
        {
            break;
        }
    }
    return null;
}

この問題のために、コードのそれほど重要ではない部分をすでに削除しましたが、これはOutOfMemoryの問題を引き起こしている部分にすぎません。基本的に私がやっていることは、画像から線を取得し、それを JPEG に圧縮することです。しかし、それは最初の画像を圧縮することしかできません。2 つ目に移動すると、OutOfMemory例外が発生します。

System.GC()Thread.sleep()out.flush()out.close()はすべて、問題を解決しようとして失敗したものです。

mBuffer の現在のサイズは 5 で、最初は 32 でした。DDMS ヒープ デバッグから、そのヒープ サイズは 30MB で、9MB を割り当てています。どうやら成長の余地がたくさんあるようです。AsyncTaskを削除するとcompressToJpeg()、問題なく完了します。

誰でもこの問題の解決策を持っていますか? 独自の YUV -> JPEG コンバーターを試す必要がありますか?

最新のコードで編集:

protected Void doInBackground(Integer... params) 
{
    int lineHeight = mHeight / mBufferSize;
    int currentHeight = 0;

    Log.d("output", "saving photo: "+mWidth+", "+mHeight);
    File outputPath = new File(Environment.getExternalStorageDirectory().getPath() + "/camerafluid-output");
    outputPath.mkdirs();
    for (int i = 0; i < mBufferSize; i++)
    {
        File imageFile = new File(mCachePath, "image-"+0);
        File outputFile = new File(outputPath, "image-"+0);

        if (!imageFile.exists())
        {
            Log.d("output", "image "+i+" not found on cache directory");
            continue;
        }

        try
        {
            int size = (int)imageFile.length();
            byte[] imageBytes = new byte[size];
            BufferedInputStream buf = new BufferedInputStream(new FileInputStream(imageFile));
            buf.read(imageBytes, 0, size);
            buf.close();

            YuvImage image = new YuvImage(imageBytes, ImageFormat.NV21, mWidth, mHeight, null);
            imageBytes = null;
            ByteArrayOutputStream out = new ByteArrayOutputStream();
            if (!image.compressToJpeg(new Rect(0, currentHeight, mWidth, lineHeight), 50, out))
            {
                Log.d("output", "problem converting yuv to jpg");
                break;
            }

            FileOutputStream s = new FileOutputStream(outputFile);
            s.write(out.toByteArray());
            s.flush();
            s.close();
            s = null;

            currentHeight += lineHeight;
            Log.d("output", "currentHeight: "+currentHeight);

            publishProgress((int)((i / (float)mBufferSize) * 100));
            System.gc();
        }
        catch(Exception e)
        {

        }

        if (isCancelled())
        {
            break;
        }
    }
    return null;
}

キャッシュディレクトリに保存されたファイルを見ることができるので、画像を正しく保存しています。これは、バッファを保存して AsyncTask を実行するアクティビティ部分です。

public void takePhoto()
{
    Log.d("output", "taking photo");

    //vfranchi - save the buffer on the disk to free memory
    File cachePath = new File(getExternalCacheDir().getPath() + "/buffer");
    if (!cachePath.exists())
    {
        Log.d("output", "cache path doesnt exist");
        cachePath.mkdirs();
    }

    int count = 0;
    int width = mPhotoBuffer.get(0).getWidth();
    int height = mPhotoBuffer.get(0).getHeight();
    int bufferSize = mPhotoBuffer.size();
    for(YuvImage i : mPhotoBuffer)
    {
        File f = new File(cachePath, "image-"+count);
        try
        {
            FileOutputStream s = new FileOutputStream(f);
            s.write(i.getYuvData());
            s.flush();
            s.close();
            Log.d("output", "saved image "+count);
            count++;
        }
        catch(Exception e)
        {
            Log.d("output", "unable to save image "+count+"\n"+e.getLocalizedMessage());
        }
    }

    mPhotoBuffer = null;
    System.gc();

    SavePhotoTask task = new SavePhotoTask(this, cachePath, width, height, bufferSize);
    task.execute(0);
}

写真を撮る方法を始めたLogcat:

03-30 12:48:08.534: D/output(15359): taking photo
03-30 12:48:09.011: V/Camera-JNI(15359): setHasPreviewCallback: installed:0, manualBuffer:0
03-30 12:48:09.011: V/Camera-JNI(15359): get_native_camera: context=0x138520, camera=0x1eea78
03-30 12:48:09.011: V/Camera-JNI(15359): Clearing callback buffers, 0 remained
03-30 12:48:09.011: V/Camera-JNI(15359): stopPreview
03-30 12:48:09.011: V/Camera-JNI(15359): get_native_camera: context=0x138520, camera=0x1eea78
03-30 12:48:15.323: D/output(15359): saved image 0
03-30 12:48:16.628: D/output(15359): saved image 1
03-30 12:48:17.880: D/output(15359): saved image 2
03-30 12:48:19.073: D/output(15359): saved image 3
03-30 12:48:20.545: D/output(15359): saved image 4
03-30 12:48:28.089: D/output(15359): saving photo: 848, 480
03-30 12:48:33.276: D/skia(15359): onFlyCompress
03-30 12:48:35.020: D/output(15359): currentHeight: 96
03-30 12:48:44.144: D/output(15359): currentHeight: 192
03-30 12:48:52.581: D/skia(15359): onFlyCompress
03-30 12:48:52.878: I/dalvikvm-heap(15359): Grow heap (frag case) to 14.975MB for 2095120-byte allocation
03-30 12:48:53.112: I/dalvikvm-heap(15359): Grow heap (frag case) to 17.975MB for 4192272-byte allocation
03-30 12:48:53.566: I/dalvikvm-heap(15359): Grow heap (frag case) to 23.975MB for 8386576-byte allocation
03-30 12:48:54.855: I/dalvikvm-heap(15359): Grow heap (frag case) to 35.975MB for 16775184-byte allocation
03-30 12:48:56.620: I/dalvikvm-heap(15359): Forcing collection of SoftReferences for 33552400-byte allocation
03-30 12:48:56.644: E/dalvikvm-heap(15359): Out of memory on a 33552400-byte allocation.
03-30 12:48:56.644: I/dalvikvm(15359): "AsyncTask #1" prio=5 tid=12 RUNNABLE
03-30 12:48:56.644: I/dalvikvm(15359):   | group="main" sCount=0 dsCount=0 obj=0x40d71628 self=0x22eea8
03-30 12:48:56.644: I/dalvikvm(15359):   | sysTid=15404 nice=10 sched=0/0 cgrp=bg_non_interactive handle=2056240
03-30 12:48:56.651: I/dalvikvm(15359):   | schedstat=( 3387725830 799926751 876 ) utm=327 stm=10 core=0
03-30 12:48:56.651: I/dalvikvm(15359):   at java.io.ByteArrayOutputStream.expand(ByteArrayOutputStream.java:~91)
03-30 12:48:56.651: I/dalvikvm(15359):   at java.io.ByteArrayOutputStream.write(ByteArrayOutputStream.java:201)
03-30 12:48:56.651: I/dalvikvm(15359):   at android.graphics.YuvImage.nativeCompressToJpeg(Native Method)
03-30 12:48:56.667: I/dalvikvm(15359):   at android.graphics.YuvImage.compressToJpeg(YuvImage.java:141)
03-30 12:48:56.667: I/dalvikvm(15359):   at com.vfranchi.camerafluid.SavePhotoTask.doInBackground(SavePhotoTask.java:78)
03-30 12:48:56.667: I/dalvikvm(15359):   at com.vfranchi.camerafluid.SavePhotoTask.doInBackground(SavePhotoTask.java:1)
03-30 12:48:56.667: I/dalvikvm(15359):   at android.os.AsyncTask$2.call(AsyncTask.java:287)
03-30 12:48:56.667: I/dalvikvm(15359):   at java.util.concurrent.FutureTask$Sync.innerRun(FutureTask.java:305)
03-30 12:48:56.667: I/dalvikvm(15359):   at java.util.concurrent.FutureTask.run(FutureTask.java:137)
03-30 12:48:56.667: I/dalvikvm(15359):   at android.os.AsyncTask$SerialExecutor$1.run(AsyncTask.java:230)
03-30 12:48:56.667: I/dalvikvm(15359):   at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1076)
03-30 12:48:56.667: I/dalvikvm(15359):   at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:569)
03-30 12:48:56.667: I/dalvikvm(15359):   at java.lang.Thread.run(Thread.java:856)
03-30 12:48:56.683: W/System.err(15359): java.lang.OutOfMemoryError
03-30 12:48:56.683: W/System.err(15359):    at java.io.ByteArrayOutputStream.expand(ByteArrayOutputStream.java:91)
03-30 12:48:56.683: W/System.err(15359):    at java.io.ByteArrayOutputStream.write(ByteArrayOutputStream.java:201)
03-30 12:48:56.691: W/System.err(15359):    at android.graphics.YuvImage.nativeCompressToJpeg(Native Method)
03-30 12:48:56.691: W/System.err(15359):    at android.graphics.YuvImage.compressToJpeg(YuvImage.java:141)
03-30 12:48:56.691: W/System.err(15359):    at com.vfranchi.camerafluid.SavePhotoTask.doInBackground(SavePhotoTask.java:78)
03-30 12:48:56.691: W/System.err(15359):    at com.vfranchi.camerafluid.SavePhotoTask.doInBackground(SavePhotoTask.java:1)
03-30 12:48:56.691: W/System.err(15359):    at android.os.AsyncTask$2.call(AsyncTask.java:287)
03-30 12:48:56.698: W/System.err(15359):    at java.util.concurrent.FutureTask$Sync.innerRun(FutureTask.java:305)
03-30 12:48:56.698: W/System.err(15359):    at java.util.concurrent.FutureTask.run(FutureTask.java:137)
03-30 12:48:56.698: W/System.err(15359):    at android.os.AsyncTask$SerialExecutor$1.run(AsyncTask.java:230)
03-30 12:48:56.698: W/System.err(15359):    at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1076)
03-30 12:48:56.698: W/System.err(15359):    at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:569)
03-30 12:48:56.706: W/System.err(15359):    at java.lang.Thread.run(Thread.java:856)
03-30 12:48:56.706: D/skia(15359): ------- write threw an exception
03-30 12:49:15.181: W/jdwp(15359): Debugger is telling the VM to exit with code=1
03-30 12:49:15.181: I/dalvikvm(15359): GC lifetime allocation: 5 bytes

YuvImage バッファは、以下に示す onPreviewFrame で作成されます。

public void onPreviewFrame(byte[] data, Camera camera) 
{
    Camera.Parameters parameters = camera.getParameters();
    Camera.Size size = parameters.getPreviewSize();

    // Generate a YuvImage from the camera data
    int w = size.width;
    int h = size.height;
    YuvImage photoImage = new YuvImage(data, parameters.getPreviewFormat(), w, h, null);
    mPhotoBuffer.add(0, photoImage);

    if (mPhotoBuffer.size() > mBufferSize)
    {
        mPhotoBuffer.remove(mPhotoBuffer.size() - 1);
    }
}
4

1 に答える 1

5

私は自分の問題の解決策を見つけることができましたが、それは YuvImage クラスを使用しないことによるものでした。compressToJpeg()少なくとも私のデバイスでは、方法に問題があると思います。

私のdoInBackgroundメソッドの最終的なコードは次のとおりです。

protected Void doInBackground(Integer... params) 
{
    int lineHeight = mHeight / mBufferSize;
    int currentHeight = 0;

    Bitmap result = Bitmap.createBitmap(mWidth, mHeight, Bitmap.Config.ARGB_8888);
    Canvas c = new Canvas(result);

    Log.d("output", "saving photo: "+mWidth+", "+mHeight);
    File outputPath = new File(Environment.getExternalStorageDirectory().getPath() + "/camerafluid-output");
    outputPath.mkdirs();
    for (int i = 0; i < mBufferSize; i++)
    {
        File imageFile = new File(mCachePath, "image-"+i);
        File outputFile = new File(outputPath, "image-"+i+".jpg");

        if (!imageFile.exists())
        {
            Log.d("output", "image "+i+" not found on cache directory");
            continue;
        }

        try
        {
            int size = (int)imageFile.length();
            byte[] imageBytes = new byte[size];
            BufferedInputStream buf = new BufferedInputStream(new FileInputStream(imageFile));
            buf.read(imageBytes, 0, size);
            buf.close();

            int[] imagePixels = MainActivity.convertYUV420_NV21toRGB8888(imageBytes, mWidth, mHeight);
            imageBytes = null;
            Bitmap bitmapImage = Bitmap.createBitmap(imagePixels, mWidth, mHeight, Bitmap.Config.ARGB_8888);
            imagePixels = null;
            ByteArrayOutputStream out = new ByteArrayOutputStream();
            if (!bitmapImage.compress(CompressFormat.JPEG, 50, out))
            {
                Log.d("output", "problem converting yuv to jpg");
                break;
            }

            FileOutputStream s = new FileOutputStream(outputFile);
            s.write(out.toByteArray());
            s.flush();
            s.close();
            s = null;

            currentHeight += lineHeight;
            Log.d("output", "currentHeight: "+currentHeight);

            publishProgress((int)((i / (float)mBufferSize) * 100));
            System.gc();
        }
        catch(Exception e)
        {

        }

        if (isCancelled())
        {
            break;
        }

    }

    return null;
}

この方法では、Yuv データを RGB に変換し、ビットマップを作成して、JPEG に圧縮して外部ストレージに保存できるようにします。これはテストのみを目的としたものであり、この方法では Signal エラー 11 や OutOfMemory 例外は発生しません。私はすでに40枚の画像のバッファで試しました。

YUV -> RGB コンバーターはここDisplaying YUV Image in Android にあります。そして、メモリ使用量が高くならないように、画像を処理する前にバッファをディスクにキャッシュするminhazのアイデアを使用しています。

于 2013-03-30T21:37:30.813 に答える