Deep Fusionって何? Deep Fusion(ディープ・フュージョン)とは！: ちょいワル

2019年11月09日

Deep Fusionって何? Deep Fusion(ディープ・フュージョン)とは！

Deep Fusionって何?
Deep Fusion(ディープ・フュージョン)とは (iPhone 11/11 Pro/11 Pro Maxで利用できる画像合成技術)

iOS 13.2からサポートされたiPhone 11/11 Pro/11 Pro Maxで利用できる画像合成技術
上記のiPhoneに搭載されるシステム・オン・チップ、A13 Bionicは、
Neural Engine(ニューラル・エンジン)」という
機械学習関連の処理に特化した機能を利用して画質向上を図る
Deep Fusionが有効なiPhoneでは、
短時間露光の4枚と標準の4枚と
長時間露光の1枚をくわえた
計9枚の画像を合成して、1枚の高画質な写真を生成します
Neural Engineにより機械学習の成果が反映されます
肌は肌らしく、服地は服地らしく、特性を生かして最適化
質感や細部の調整は
ピクセル単位
ノイズリダクションも行われて、写真の表現力が向上
この処理は、カメラアプリでシャッターボタンが押される前から始まっています
シャッターボタンを押す前から短時間露光の4枚と標準の4枚がバッファされ、シャッターボタンを押すと露光時間長めの1枚が撮影され、計9枚の画像を合成

Deep Fusionは、ユーザの判断でON/OFFすることはできない
iPhoneに内蔵の照度センサーで周囲の明るさを測定し、必要と判断されたときに機能する
カメラアプリにDeep Fusionが有効かどうかを示すインジケータはありません
Deep Fusionの機能が使用されたかどうかの情報もEXIFデータに記録されません
他の撮影モードとの棲み分けもレンズごとに考慮されている
○標準(広角)レンズ
通常の明るさではスマートHDRで撮影
中間の明るさより暗いと判断されるとDeep Fusionに
さらに暗くなるとナイトモードにへと切り替わる

○望遠レンズ
Deep Fusionを中心に利用

○超広角レンズ
Deep Fusionが利用されません
iOS 13.2で追加のDeep Fusionは、周囲の明るさを判断して動作します