問題タブ [fisheye]

世界座標に線があり、それを画像に投影します（この質問math.stackexchangeで説明されているように）。これにより、画像空間で単純な直線方程式が得られるため、画像内で OpenCV を使用して簡単に印刷できます。

次に、ラインを魚眼カメラ画像に投影したいと思います。対応する非線形歪み関数があるため、ポイントを簡単に歪めることができます。単純な方法は、この関数を使用して、生成されたラインから各ポイントを歪めることです。しかし、それはいくつかの線分と未設定のピクセル (通常は歪んだ線に属します) につながります。

正しい歪んだ線を取得するための賢い方法は何でしょうか。たぶん、線の投影を別の方法で処理する必要もありますか? 直線をより頻繁にサンプリングすることもできますが (つまり、サブピクセル座標を使用して)、正しい解決策を保証するものではないと思います。

編集：

私の歪み関数は単純な多項式です

ここaで、 は光軸に対する歪みのない入射光線の角度であり、 はr歪みのある画像のピクセルまでの半径です。詳細については、こちらをご覧ください。

現在、シャドウ テクスチャを使用してシャドウをレンダリングするプロジェクトに取り組んでいます。
スポットライトの方向に必要なテクスチャは 1 つだけなので、スポットライトの場合は非常に簡単でしたが、すべての方向に 6 つのテクスチャまたはポイントライトの周囲のすべてのオブジェクトをレンダリングする 1 つのテクスチャが必要なため、少し難しくなります。
そして、それが私の問題です。ポイントライトの周りに 360 度の角度ですべてのオブジェクトをレンダリングする投影マトリックスを生成するにはどうすればよいですか?
基本的に、魚眼 (または他の 360 度カメラ) の頂点シェーダーを作成するにはどうすればよいですか?

フルフレームの魚眼画像を正距円筒図法に変換したいので、パノラマ スティッチングに使用できます。この目的で Hugin と libpano を使用しましたが、問題なく動作します。次の画像は、hugin によって変換されています。そのような変換または類似の変換を実現できる数式を知りたいです。

元の画像

変換後の画像

チェッカーボードの 20 枚の画像セットを使用して魚眼レンズを調整しました。ポイントはすべて正しくラベル付けされており、固有値とレンズ歪み係数を取得しています。

「正方形サイズ」変数を 15 mm に対して 15 に定義すると、歪み係数が 0 になり、焦点距離が ~600 になります。0.015 に設定すると、歪み係数と焦点距離が ~1200 になります。どちらの場合も、投影の中心は画像のほぼ中間点であり、妥当です。

画像に歪み補正を適用しようとすると、非常に奇妙な結果が得られます。

歪みのない画像

私はなぜなのか理解していない。歪み係数が 0 の場合でも、この画像が得られます。誰かがそれを助けることができれば、それは大歓迎です!

オープン フレームワークを使用して、デュアル フィッシュアイ ビデオ (ricoh theta S カメラから受信) を正距円筒図法 (iOS アプリケーション用) に変換しました。

デュアル魚眼画像サンプル:

正距円筒図法のサンプル:

以下のシェーダーを使用します。

equirectangular.frag

equirectanguler.vert

以下のコードで： main.mm

offApp.h

そして、これが結果です：iphone5sで

plsは私が逃したものを指摘してください。