ポートレートモードの「ボケ味」は、完璧を求める危険かつ大がかりな探求でした

Apple の iPhone ラインナップのポートレートモードは成功させるのが難しく、コンピュテーショナルフォトグラフィーへの移行は経営上の議論を引き起こし、関係者にはある程度の専門的リスクが生じました。

大多数の iPhone ユーザーは、デバイスのポートレートモードに慣れているでしょう。カメラは、前景と背景の要素をぼかしながら、被写体の写真を鮮明に焦点を合わせて撮影することができます。でハーバード・ビジネス・レビュー プロフィールApple のイノベーション管理に関して言えば、「ボケ」を実現する旅は、取り組むのが難しいものでした。

これは、Apple が有名な革新的な技術の動きでした。しかし、その名声は、その方法からもたらされるものです。Appleは従業員を管理する、常に雇用しているテクノロジーの専門家からそうしているように。

2009 年、シニアリーダーの Paul Hubel は、iPhone ユーザーがポートレートスタイルの写真ボケも含めて。写真の中の意図的に焦点をぼけた要素を指す日本語。ボケ味通常、ぼやけて心地よい背景を作成し、見る人が焦点の合った被写体に注意を向けられるようにするために使用されます。

一般的にボケを活かした撮影は、レンズの焦点範囲を細かく管理できる一眼レフカメラなどの高価なカメラに限られており、スマートフォンのカメラシステムではそこまでの性能を発揮できないのが一般的です。

ヒューベル氏は、デュアルレンズカメラの設計でコンピュテーショナルフォトグラフィーを利用して、一眼レフカメラのボケ味を模倣した合成画像を作成できると考えました。このコンセプトはAppleのカメラチームに歓迎され、「より多くの人がより多くの時間、より良い画像を撮る」ことを奨励する目的を持っていた。

初期の取り組みは有望でしたが、アルゴリズムが画像内で主要な被写体が終了し、ぼやけた背景が始まるラインを決定できない場合など、「失敗例」がチームを悩ませました。一部の前景要素が被写体の近くにあるものの、ぼかすことが意図されている場合、アルゴリズムはこれらの余分な部分の一部を誤ってぼかし、他の部分は鮮明に焦点を合わせたままにする可能性があります。

開発関係者の一人は、ヒューベル氏はこの機能の制作のほとんどの間、「スキー板の上から外に出ていた」と語った。具体的には、この機能が機能しなかったり、うまく機能しなかったりした場合、ヒューベル氏のチームは残りの iPhone 開発作業に対する信頼と重要性を失う危険にさらされること、そして Apple の経営陣そのものが危険にさらされることを意味した。

Apple には、「関与する手法や技術によってデジタルプロセスに導入されたデータに意図しない変更がないこと」に相当する、アーティファクトをゼロにするという厳格なエンジニアリング基準があるため、これらのいわゆる「コーナーケース」は、Apple のチーム間で複数の「厳しい議論」を引き起こしました。。このようなまれなケースにより、修正の時間を確保するために機能の実装が 1 年延期されることになりました。

iPhone XRのポートレートモードでのボケの例

デザインおよびマーケティングのリーダーはエンジニアリングチームから招待され、機能に影響を与える可能性のある品質基準について合意することになりました。これにより、「何が美しいポートレートを作るのか?」という疑問も生じました。品質基準を作成するために、写真家の優れた作品を、目は鋭く保ちながら顔の輪郭がどのようにぼやけるかなどのテーマごとに分析し、アルゴリズムに導入しました。

ポートレート写真は元々撮影後に画像に適用されるように設計されているため、ポートレート写真のプレビューでは別の問題が発生しました。ヒューマンインターフェイス設計チームは、ユーザーが調整できるように、ショットを撮影する前に何らかの形式の「ライブプレビュー」が必要であると主張しました。

センサー制御とカメラ操作を担当するビデオエンジニアリングチームと協力することで、カメラハードウェアチームがこの追加機能を推進して作成できるようになりました。その後、iPhone 7 Plus で一般に導入され、Apple のマーケティング活動の中心的な柱を形成しました。

カメラアプリの最新バージョンのポートレートモードは、場合によっては機械学習に大きく依存することがあります。のためにシングルカメラの iPhoneiPhone XR やiPhone SE、コンピュテーショナルフォトグラフィーの進歩により、ソース画像の数が減ったにもかかわらず、この機能は引き続き動作できるようになりました。