iOS 14.3 で、Apple は iPhone での ProRaw 写真のサポートを開始しました。プロの写真家であるオースティン・マンが、このフォーマットについての最初の考えを明かしました。
Apple ProRAWはここそしてプロの写真家たちは、このフォーマットの背後にある力について声を上げています。 AppleはA14プロセッサとカメラシステムのパワーを引き継ぎました。iPhone12プロそして、ProRAW と呼ばれる新しいプロ仕様の画像フォーマットを作成しました。
オースティン・マン氏、iPhone で Apple メディア分野で最もよく知られているカメラのレビューが書きましたポストProRAW とそれが iPhone 写真にとって何を意味するのかについての彼の考えをまとめました。
まず、RAW とは何か、そしてそもそも RAW がなぜ重要なのかについて説明します。オースティン氏は、これは写真家により詳細な制御を提供するファイル形式であると述べていますが、それが正確に何を意味するかを見てみましょう。
RAW画像とは何ですか?
RAW 画像ファイルはその名の通り、アルゴリズムの変更やコンピュテーショナル フォトグラフィーの影響がまったくない画像ファイルです。ユーザーが RAW 写真を撮影するとき、センサーが捉えたものとその瞬間に ISP が提供できるあらゆるデータが得られることを期待します。
RAW が重要なのは、写真家に創造力のすべてが与えられるからです。アルゴリズムとプロセスは人間によって書かれ、独自のコードと芸術的傾向に基づいて教えられるため、コンピュテーショナル フォトグラフィーで撮影された画像は、美しくも独自の画像を作成します。ユーザーは、iPhone と Samsung のカメラを比較し、特定の ISP がどのように画像を作成するかを比較するときに表明されるこれらの意見を確認できます。
Apple ProRAW はこれをさらに一歩進めています。利用可能なすべてのデータを含む DNG 画像ファイルが提供されるだけでなく、計算の魔法の一部も提供されます。これは、Apple の ISP を使用して、編集用の大量のデータとともに美しくレンダリングされた画像を取得できることを意味します。
プロの iPhone 写真アプリである Halide は、アプリ内で ProRAW を使用するテストを行っており、適切に処理された場合に ProRAW 画像からどれだけ詳細を引き出すことができるかを披露しました。
シャドウの回復は RAW 写真の 1 つの側面にすぎません。ユーザーは、iPhone ISP のバイアスに依存することなく、ホワイト バランス、ノイズ、シャープネスを制御することもできます。
オースティン・マンのテスト
オースティン・マン氏は、ユーザーが夜間撮影で ProRAW フォーマットを活用したい理由の具体例を示しました。最初の画像では、標準的に処理された HEIC フォーマットを直接示しています。iPhone 12 プロマックス2 番目の画像は、ProRAW でキャプチャおよび編集された画像を示しています。
HEIC (左) 星を消す vs ProRAW (右) 画像クレジット: Austin Mann
ノイズ低減アルゴリズムは、空の星の多くは補正が必要な単なるノイズであると判断したため、処理された HEIC 画像にははるかに少ない星しか表示されません。 2 番目の画像は、Lightroom での編集中にオースティンが画像をどの程度制御できたかを示しており、空の星などの重要な要素を失うことなく、画像に存在する詳細をより引き出すことができたことを示しています。
オースティン氏はこの投稿で ProRAW のさまざまな側面を取り上げ、さらに ProRAW がどのようにしてプロのカメラにも匹敵する画像キャプチャを可能にするかについて議論しました。同氏は、ProRAW には 14 ストップのダイナミック レンジがあり、日の出や日没のような複雑な状況で写真を撮影するときに役立つと指摘しています。
Apple ProRAW は 12 ビット カラーもサポートしており、8 ビット カラーに制限されている HEIC よりもはるかに多くのカラーを備えています。これにより、ProRAW 画像の色合いがより微妙になり、HDR ディスプレイで見ることができます。 Apple はディスプレイで P3 色域を使用しており、12 ビット カラーの写真を非常にポップにしています。
Ben Sandofsky は Halide に取り組んでいる開発者の 1 人であり、彼は大規模なブログ投稿ProRAW とサードパーティ API の使用について詳しく説明します。彼は、ProRAW とは何か、そして開発者がこの強力なフォーマットをどのように活用できるかについて、より明確に説明しています。
前に述べたように、Apple ProRAW はそれ自体がファイル形式ではなく、高度な DNG ファイルを含む情報のパッケージです。 Ben は、Apple がこのファイルに対して、iOS での RAW の処理方法を変更するいくつかのトリッキーな操作を行っていると説明しています。
ファイルの複雑さを軽減するために、Apple はデモザイク手順を実行し、それが完了した後に画像を保存します。これはブログで詳しく説明されているステップですが、基本的にベース画像の RGB 構造を取得し、アルゴリズムを実行して画像の色を決定します。 Apple は、このステップを自社で実行することで、サードパーティのプログラムやアプリでのずさんなデモザイク アルゴリズムを回避しています。そのため、Apple の DNG ファイルは、DSLR から取得したものとは既に異なります。
Halideの開発者は、この方法により、Appleは将来のセンサーがどのようになるかをより詳細に制御できるようになると述べています。 Apple が将来の iPhone センサーにあまり従来的ではないモザイク パターンを選択した場合、ProRAW ファイルがすでに処理しているため、ソフトウェアでそれを考慮する必要はありません。
ProRAW フォーマットに対する Apple の管理は、互換性の向上も意味します。 Halide が RAW フォーマットを開発したとき、それは広角レンズと望遠レンズに限定されていました。超広角レンズと自撮りカメラは RAW フォーマットと互換性がありませんでした。 Apple ProRAW はこれを変更し、Halide のようなアプリは Apple の RAW フォーマットを使用して iPhone Pro のすべてのレンズで撮影できるようになりました。
ProRAW シャドウリカバリの別の例。画像クレジット: Sebastian de With
ProRAW DNG ファイルには、画像の撮影時に実行されたコンピュテーショナル フォトグラフィーの結果も含まれています。これは、スマート HDR データを画像編集に使用できることを意味し、上で共有したツイートのような印象的な画像を提供します。 ProRAW は引き続き Deep Fusion からのデータも使用しており、暗いシーンでのノイズが軽減されます。
Apple は、セマンティック イメージ マッピングからのデータも DNG に含めています。これらのマップは、人物を背景から分離するために ISP が「認識」したものに基づいて生成され、これにより一眼レフ iPhone でポートレート機能が動作できるようになります。
ProRAW の API は明らかに非常に複雑で、開発者はアルゴリズム データのどの部分を含めるかを選択できます。これにより、Halide のような開発者は撮影体験をコントロールできるようになります。例としては、ProRAW のビット深度を 12 ビットから 10 ビットに削減することで、ファイル サイズを削減しながらも大量のカラー データをキャプチャできるようにすることが挙げられました。
実行中のユーザーiOS14.3iPhone 12 Pro または iPhone 12 Pro Max では ProRAW で撮影できます。設定アプリに移動し、カメラセクションを開き、「フォーマット」を選択します。ここから ProRAW をオンに切り替えると、カメラ アプリに RAW のインジケーターが表示されます。
ProRAW はデフォルトでは無効になっています。カメラ アプリで RAW トグルをタップすると、Live Photos が無効になり、ProRAW 形式でのキャプチャが開始されます。 ProRAW でキャプチャされた画像は HEIC よりもはるかに大きいため、すぐにストレージを消費する可能性があります。 ProRAW を使用すると、ファイル サイズが HEIC の最大 4 倍になることが確認されています。
Apple ProRAW で撮影する場合、Live Photo モードとポートレート モードは利用できません。 ProRAW ファイルは、約 25MB 以上になる傾向があります。 Apple の高度な DNG 形式を利用できるアプリが、iOS 14.3 のリリースとともに展開され始めました。のハライド ProRAW アップデートで利用可能になりましたアプリストア。
Isamu 
Isamu 
Isamu