android - 一連の画像をビデオにエンコードする

Question

Androidで一連の画像/写真からビデオファイルを作成するにはどうすればよいですか？これは現在のSDKで実行できますか？またはコーデックライブラリが必要ですか？

Answer 1

私はマークに同意します。C/C++ ライブラリの中には、ffmpeg hereまたは X264 hereがあります。私はそれらや Android NDK が使いやすいとは思わなかったと言わざるを得ませんが、それはおそらく、C/C++ と JNI についてよく知らないからです。このルートに興味がある場合は、Android 用の RockPlayer 無料アプリには、Android ですぐに使用できる ffmpeg のビルド済み共有ライブラリがあります。彼らは、これらのライブラリは LGPL コンポーネントのみを使用すると主張していますが、これについては満足する必要があると思います。Javaに関しては、当然のことながら、ここからアクセスできるjffmpegと呼ばれるffmpegの（ある種の）ポートがありますしかし、それでも既存の ffmpeg フレームワークの多くを呼び出しているため、NDK の世界に戻っています。Java Media Framework (JMF) を使用して一連の画像をビデオに変換することは可能ですが、次の欠点があります。

1. ビデオ形式の数が限られています。
2. H264 や MPEG4 など、ほとんどの (すべてではないにしても) Android フォンで再生できるビデオは生成されません。
3. JMF コードはかなり古く、長い間進歩しておらず、肥大化して構造化されていないため、Android にパッケージ化されていない追加の Java 依存関係が存在する可能性があります。

私が使用した別のオプションは Adob​​e Air ですが、これは 17Mb のペイロードであり、一部のユーザーから不満が寄せられています。

ffmpeg と Android NDK に関するスタック オーバーフローには、他にも多くの質問があります。

プロジェクト頑張ってください。

Answer 2

ffmpegあなたのレスキューレンジャーです。Android 用の FFMPEG ポートをダウンロードできます。詳細については、質問FFmpeg on Androidを参照してください。

このポートは、GIF、JPG、PNG、BMP などの入力画像フォーマットと、多くのコーデックを備えた AVI、MP4 (コンテナ) の出力ビデオ フォーマットなど、必要なほとんどすべてをサポートしています。

Answer 3

これに対する組み込みのサポートはありません。必要なことを実行する Java ソース コードか、ライブラリに変換して NDK 経由で使用できる C/C++ コードを見つける必要があります。または、ビデオをサーバーに置くことが最終目標の場合は、画像/写真をアップロードして、サーバーにビデオを作成させます。

Answer 4

H.264 ( AVC )、MPEG 1/2、Apple ProRes、JPEG など、いくつかの一般的なビデオ形式とコーデックの純粋な Java 実装を含む、JCodec ( http://jcodec.org ) と呼ばれる無料のオープン ソース ライブラリを使用できます。 、MP4 (ISO BMF)、MPEG PS、MPEG TS、マトロスカ。JCodec の低レベル API を利用する以下 のCORRECTED
クラス を使用できます。

public class SequenceEncoder {
    private SeekableByteChannel ch;
    private Picture toEncode;
    private RgbToYuv420 transform;
    private H264Encoder encoder;
    private ArrayList<ByteBuffer> spsList;
    private ArrayList<ByteBuffer> ppsList;
    private CompressedTrack outTrack;
    private ByteBuffer _out;
    private int frameNo;
    private MP4Muxer muxer;

    public SequenceEncoder(File out) throws IOException {
        this.ch = NIOUtils.writableFileChannel(out);

        // Transform to convert between RGB and YUV
        transform = new RgbToYuv420(0, 0);

        // Muxer that will store the encoded frames
        muxer = new MP4Muxer(ch, Brand.MP4);

        // Add video track to muxer
        outTrack = muxer.addTrackForCompressed(TrackType.VIDEO, 25);

        // Allocate a buffer big enough to hold output frames
        _out = ByteBuffer.allocate(1920 * 1080 * 6);

        // Create an instance of encoder
        encoder = new H264Encoder();

        // Encoder extra data ( SPS, PPS ) to be stored in a special place of
        // MP4
        spsList = new ArrayList<ByteBuffer>();
        ppsList = new ArrayList<ByteBuffer>();

    }

    public void encodeImage(BufferedImage bi) throws IOException {
        if (toEncode == null) {
            toEncode = Picture.create(bi.getWidth(), bi.getHeight(), ColorSpace.YUV420);
        }

        // Perform conversion
        for (int i = 0; i < 3; i++)
            Arrays.fill(toEncode.getData()[i], 0);
        transform.transform(AWTUtil.fromBufferedImage(bi), toEncode);

        // Encode image into H.264 frame, the result is stored in '_out' buffer
        _out.clear();
        ByteBuffer result = encoder.encodeFrame(_out, toEncode);

        // Based on the frame above form correct MP4 packet
        spsList.clear();
        ppsList.clear();
        H264Utils.encodeMOVPacket(result, spsList, ppsList);

        // Add packet to video track
        outTrack.addFrame(new MP4Packet(result, frameNo, 25, 1, frameNo, true, null, frameNo, 0));

        frameNo++;
    }

    public void finish() throws IOException {
        // Push saved SPS/PPS to a special storage in MP4
        outTrack.addSampleEntry(H264Utils.createMOVSampleEntry(spsList, ppsList));

        // Write MP4 header and finalize recording
        muxer.writeHeader();
        NIOUtils.closeQuietly(ch);
    }

    public static void main(String[] args) throws IOException {
        SequenceEncoder encoder = new SequenceEncoder(new File("video.mp4"));
        for (int i = 1; i < 100; i++) {
            BufferedImage bi = ImageIO.read(new File(String.format("folder/img%08d.png", i)));
            encoder.encodeImage(bi);
        }
        encoder.finish();
    }
}