日経新聞で、写真1枚のみの情報で写真の歪曲や傾きを高精度に素早く補正することができる、パナソニックの革新的な技術が紹介されています。
- 「カメラ校正の世界観を塗り替えた」。こう自信を見せる36歳の若手エンジニアが、パナソニックホールディングスプラットフォーム本部にいる。わずか2年で、撮影画像のゆがみなどを高精度推定する手法を編み出した若井信彦氏だ。
- 新手法を使えば、斜めに撮影した画像や、広角・魚眼レンズで撮影したゆがみのある画像を瞬時にゆがみのない水平の画像に直せる。しかも、その変換を行うための変数抽出に必要となるのは画像1枚のみ。これまでは複数枚の写真が必要だった。「スマートフォンやカメラ本体のみで(自動的に)画像補正できるようになる」と若井氏は語る。
- 1枚の画像からカメラ校正する「深層単画像カメラ校正技術」はここ数年で国際学会での発表が続く技術トレンドの1つ。ただ、推定に用いるための情報が少ないため「非常に困難で、これまでは精度が不十分だった」(同氏)。
- 結果として試行錯誤が不要になり、学習時間を「従来法であれば27年、提案法で1日」に短縮できた。
- パナソニックHDは今後、同手法を実データを使いながら検証し、実用化を目指す。
パナソニックの開発した新技術は、一枚の画像のみの情報で歪曲や傾きを高精度に瞬時に補正するというもので、実用化されれば、デジカメやスマートフォンにもかなりの恩恵がありそうですね。また、レンズの収差などのデータのない画像でも歪曲の自動補正を適用することができるようになるので、古いレンズで撮影した画像の補正にも活用できそうですね。
take
これ 正直とてもほしい機能です。商店の内装など撮るので歪曲補正が毎度大変で汗 S1にアップデートで くるわけないか… ですがPanasonicは自前レタッチソフトなかったと記憶していますが、本体に搭載してくるのでしょうか?
KJ
これが連続で複数枚できたら非常に楽になるのでライトルームやフォトショップに
搭載されないものでしょうか。
YO003
計算速度が十分にあれば、センサーやレンズの手ブレ補正にもいかせるかもしれないと思います。
swing
加速度センサー無しにGoProみたいなカメラ作れるってことかな。
瞬時に、ってことは動画のリアルタイム補正にも使えそうですが、前後のフレームで補正量に違いが出たりするとおかしくなりそう。
おそらく、動画みたいな複数枚での補正はすでにあるんでしょうね。それと組み合わせれば精度が上がったりするのかも。
考え中
ドラレコ、監視カメラなんかが優先的に使われる事になるんですかね。
もちろんLUMIXのシリーズにも落とし込んでほしいところですが。
ほっじす
この技術があればレンズプロファイルが存在しないオールドレンズでも徹底的に湾曲補正できるようになりますね。
オールドファンにはなかなか夢があるのではないでしょうか。
symmar125
Photoshop CCで使える時が来るのでしょうか?
Mスクエア
大袈裟かも知れませんが、この技術によってレンズの補正に関するレンズ枚数の削減が出来、超軽量で安価なレンズでもきれいな写真が出来る未来が来るのかな?
それこそ、この技術がゲームチェンジャーになるかも知れませんね。
まずは、どんな実用化がされるのか早く世に問うて欲しいです。
symmar125
Photoshop CCで使える時が来るのでしょうか?
アキオ
素晴らしい技術だが写真が段々コンピューターで加工される様になると、芸術と言う面では良いのだろうがAIで作るCGも含めて何かしっくり来ない所がある。
BB318
ttps://news.panasonic.com/jp/press/jn220928-1
ttps://arxiv.org/abs/2111.12927
おそらく、この発表がニュースになったのだと思います。
論文では、Canon EOS 6D Mark II + Canon EF15mm F2.8 FisheyeやPanasonic LUMIX GM1+ Panasonic LUMIX G FISHEYE 8mm F3.5で撮影した魚眼画像の例もありました。
ただ、Lightroomや動画編集ソフトで後加工するLumixなどのミラーレスカメラ向けというよりは、自動運転、監視カメラ、ドラレコ、ドローン、ロボットあたりの用途が本命な気がします。
zd
PTZカメラやドラレコなどが、レンズの質に妥協がいる機器類への実用が先になりそうですが、色んな分野へ夢が広がります。オールドレンズや癖玉への母艦機が現れれば楽しみです。
この技術ありきでのコンパクトレンズとか是非見たいです。
ASA
従来はきまった数値(レンズプロファイル)やカメラ配置(googleマップのストリートビューなど)でしか補正できなかったものが、あらゆる変則状況へフレシキブルに対応するという理解でいいのでしょうか?
saka-Q
パースと消失点が無くても、例えば星空だけでもできるのでしょうか?
得意な画像がある様に思えます。