Keras に時空間完全畳み込みネットワーク (STFCN) を実装したいと思います。(64, 16, 16)
別の LSTM への入力として、3D 畳み込み出力 ( shape のテンソルなど) の各深度列を供給する必要があります。
これを明確にするために(64 x 16 x 16)
、次元のテンソルがあります(channels, height, width)
。テンソルを 16 * 16 = 256 の shape テンソルに (明示的または暗黙的に) 分割する必要があり(64 x 1 x 1)
ます。
以下は、時空間モジュールを説明するための STFCN 論文の図です。上で説明したのは、「空間機能」と「時空間モジュール」の間の矢印です。
このアイデアは Keras でどのように実装するのが最適でしょうか?