クアルコムは、Snapdragon Tech Summit で、次世代のプレミアム Android に搭載されることを期待しているチップである新しい 855 の概要を説明しました。これは、Apple が最新の A12 Bionic に至るまでアプリケーション プロセッサで推進してきたシリコンの取り組みに取り組んでいますが、クアルコムのこれまでで最も先進的なプロセッサを搭載したハイエンド Android を誰が、そしていつまで開発するのかはあまり明らかではありません。
クアルコムの Snapdragon 855 の紹介を聞いた出席者は、おおむね肯定的なコメントを出しました。ベン・バジャリン氏はツイートした、「私はプレミアムチップ市場におけるクアルコムのことを心配していました。彼らのプレミアムスマートフォン顧客のほとんどは独自のシリコンを製造していたからです。しかし、855は非常に大きな飛躍であるように見えますので、彼らは維持できると思います、そしてさらにはプレミアムセグメントでシェアを取り戻します。」
問題の 1 つは、Android のプレミアム セグメントはそれほど大きくなく、価格とパフォーマンスの点で低下しつつあることです。サムスンは主力製品「ギャラクシーS9」の売れ行きが期待外れだったことを受けて、ギャラクシーJシリーズのような中間層の携帯電話の販売にもっと集中すると投資家にきっぱりと語った。これらの携帯電話は、クアルコムの最速プレミアム チップを使用するのではなく、中間層の Snapdragon または Samsung 独自の Exynos チップを使用します。
さらに、第 2 位の Android メーカーである Huawei は、最近、以下を使用した最新のプレミアム携帯電話を発売しました。独自のキリンチップスHISilicon 子会社によって構築されました。このため、クアルコムの最新かつ最高の技術にお金を払ってくれる高級携帯電話メーカーを見つけようとしているクアルコムのスナップドラゴンの市場はますます圧迫されている。
そして、Android の購入者はハイエンドのパフォーマンスや高度な新機能を求めるのではなく、むしろ低価格を求めるようになっています。 Google 独自の Pixel スマートフォンは最新の Qualcomm アプリケーション プロセッサを使用していますが、目立つように独自のカメラ シリコンと組み合わせられています。彼らが勝った一方で静止画賞を受賞、商業的に大量に販売されていません。そして携帯電話の性能遅れているアップルのiPhone。
Googleは以前、高度なチップを販売できなかった製品を開発した。同社のGalaxy Nexusはテキサス・インスツルメンツをスマートフォン業界から追い出すのに貢献した。 Nexus 7 と Nexus 9 の失敗により、Nvidia の Tegra がモバイル プロセッサから外されることになりました。そして現在、Pixel は先進的な Snapdragon の大量販売をサポートするために何もしていません。問題は、アップルが世界の大多数のプレミアム購入者をますます惹きつけている頭打ちのスマートフォン市場において、誰がクアルコムのプレミアムチップの大量生産を推進するのかということだ。
ネットワークよりも速い
クアルコムは、Snapdragon 855 の接続性を活用し、LTE Cat. 855 をサポートする統合 X24 モデムによって提供される潜在的なスループットを促進しました。 20—これは驚異的な 2Gbps で、Intel の XMM7560 モデムを使用した Apple の最新の iPhone の最大 2 倍の速度です。問題の 1 つは、それほど高速なネットワークがないことです。
クアルコムの既存の X20 モデム (サムスンの Galaxy Note 9 のモデルで使用されている) は、最新の iPhone の 1 Gbps モデムと比較して、理論上 20% のパフォーマンスの優位性をすでに主張しています。しかし、現実世界では、Samsung ユーザーは 1.2 GB に近いダウンロードに達していません。
10月に実施されるテストは、PCマグ、しかありませんでした。小さな違いこれは、X20 搭載の Note 9、Pixel 2 に搭載された Qualcomm の初期の 1Gbps X16、および iPhone XS Max に搭載された 1Gbps Intel の XMM7560 の間にあり、簡略化された理想的な設定で実験室の機器を使用していました。
米国で実際に行われたテストでは、Note 9 の平均ダウンロード速度は 43.2Mbps に達しましたが、iPhone の平均ダウンロード速度は 38.9Mbps で、ユーザーがその違いに気づくのは困難であり、ギガビット速度には遠く及ばないものでした。カナダでは、2 台の携帯電話がそれぞれ 97.7Mbps と 85.4Mbps の平均ダウンロード速度を記録しましたが、これもどちらも無視できる程度であり、1.2 Gbps のダウンロードはおろか、1 Gbps を一桁以上下回っています。
そのため、理論上の速度をさらに高速化するためのクアルコムのモデム技術の進歩は、技術的には印象深いものの、マーケティング上のポイントとしてはほとんど無関係なものとなっている。モデム技術の向上には速度以外にも利点があるが、クアルコムは特に強力なセールスポイントを明確にしていない。そして、実際にはその必要はありませんでした。その代わりに、水を運ぶことに喜んでいるメディア関係者に、ナンセンスなマーケティングの綿毛を与えます。
CNET はクアルコムにすぐに水を差し出しました
確かにモバイル ネットワークは時間の経過とともに高速化し続けていますが、ネットワーク オペレーターは歴史的に、より多くのユーザーをサポートするためにネットワークを最適化してきましたが、理論上の最速に近い速度を個人に提供することは目的ではありませんでした。
それでもクアルコムは、同社の 855 をオプションで 5G に精通した X50 モデムと組み合わせて、まだ存在しないネットワークへの接続を確立できることを概説しました。これは製品ではなく、ロードマップです。しかし、その目的は、Apple が製品を販売し、そのロードマップをほとんど隠しているため、Qualcomm が計画していることと Apple が販売しているものを比較することにある。
最近の報道によると、Appleは2020年に5G対応のiPhoneの出荷を開始する予定で、通信事業者が5Gネットワークの構築を開始する中、一部の主力Androidは来年いっぱい、5Gネットワークに独占的にアクセスできるようになる。これは、競合他社が 4G LTE ネットワークに移行するまでの期間よりもはるかに短いです。そして 4G は 3G の現状を大幅に改善しました。現在、モバイルデバイスが 5G テクノロジーを実際に利用できるようになるまで、真に高速な 4G ネットワーク (今日の iPhone が利用できるようになる) を展開するには、膨大な道のりが残されています。
クアルコムは、1Gbps を超える LTE と今後の 5G をサポートするモデム速度、および(理論上)最大 10Gbps の速度を備えた新興 WiFi ネットワークの優れたサポートに重点を置いています。アプリケーション プロセッサ上の他の場所で提供します。
Appleは、CPUのパフォーマンスと効率、メタルアクセラレートされたGPUグラフィックス、ユビキタスな機械学習を強化するためにiOSがますます使用しているNPU「ニューラルエンジン」、そしてコンピューテーショナルフォトグラフィーを推進するために使用されるますます進化した画像信号プロセッサにおいて、それを打ち負かしている。 。
Apple がシリコンで Qualcomm に勝つのは、OS プラットフォームで Microsoft に勝つようなもの
Apple が 2013 年に 64 ビット A7 をリリースしたとき、クアルコムにとっては恥ずかしいことでした。Apple がこの秋に A12 Bionic を 7nm アプリケーション プロセッサとして提供できたことも同じくらい屈辱的でした。クアルコムはまだ、最初の7nmチップの販売準備について話しているだけだ。クアルコムはアップルよりずっと前からモバイルプロセッサを製造してきた。どうしてそんなに劣勢になっているのでしょうか?
その大きな部分は、Apple が毎年 2 億台以上のハイエンド携帯電話を販売しているため、先端技術の開発に資金を提供できるということです。今年、アップルの平均販売価格は800ドル近くに達した。クアルコムは少数のハイエンド Android のサービスを提供していますが、これらの販売数量ははるかに少ないです。
Apple が近いうちに苦境に陥るかもしれない理由として広まったすべての懸念(消費者が高価格に躊躇していること、消費者向け携帯電話の長期保有サイクル、スマートフォンに対する全く新しい需要の源泉が残されていないこと)は、Android メーカーにも影響を与えている。サムスンの携帯電話の売り上げは、劇的に下がった、ハイエンドモデルが最も大きな打撃を受けています。
これは、高級デバイス向けの高度な技術の構築を専門とするクアルコムのようなチップメーカーにとってはひどいニュースだ。しかし、それに加えて、さまざまな携帯電話メーカーがますます Apple に倣い、独自のアプリケーション プロセッサや独自のモデムの設計と構築に投資するようになっています。
サムスンは何年にもわたって独自のExynosチップを開発しており、一部のモデルには独自のモデムを統合し始めています。スマートフォンが依然として成長している中国には、AllWinner や MediaTek など、Qualcomm の基本的な競合他社がさまざまに存在し、Qualcomm のビジネスの中位層と下位層のボリュームを食いつぶしています。しかしこの秋、ファーウェイは子会社のHISiliconが製造したキリンチップを搭載した新しい主力携帯電話を発売した。 Appleと同様に、同社もクアルコムよりも先に最初の700万チップを出荷した。
これは、販売されたすべての携帯電話のほぼ半数を占める世界の上位 3 つのスマートフォン メーカーがすでに自社の内蔵チップに注力しており、新世代のハイエンド プロセッサを提供するためにクアルコムにお金を払うつもりはないことを意味します。
Qualcomm Adreno と Apple の GPU
クアルコムの新しい 855 には Adreno 640 GPU が搭載されており、同社は、新しい 7nm プロセスのおかげもあって、グラフィックス パフォーマンスが最大 20% 向上していると述べています。 Apple が A11 よりもグラフィックス パフォーマンスを 50% 向上させた A12 Bionic の導入と比較するまでは、これは良いことのように聞こえます。
Appleはすでに業績でリードしていた。 Samsung の Galaxy S9 と Adreno 640 GPU を搭載した Pixel 3 で使用されている Snapdragon 845 は、Apple の新しい A12 Bionic によって完全に破壊されましたが、昨年の iPhone X の A11 Bionic によっても、CPU とグラフィックスの両方で完全に破壊されました。また、理論上のモデム速度とは異なり、グラフィックスと CPU のパフォーマンス、およびバッテリー効率はユーザーにとって明らかであり、実際に電話機の望ましさを決定する要素となります。
奇妙なことに、シャラ・ティブケンはCNET確かにそれを知っている彼女は、Intel モデムに対する Qualcomm の理論上の優位性について話すことを好んでおり、達成不可能なモバイル ネットワーク スループットを製品の「速度」と同一視して Apple を貶めています。
Apple は、GPU シリコンでのリードを前進させていることに加えて、Metal API を独自に推進するという利点も持っており、独自のグラフィックス API および iOS プラットフォームと緊密に統合してハードウェア グラフィックス パフォーマンスを最適化することができます。クアルコムは、OpenGL を開発していた委員会によって推進されたグループ標準である Vulkan との互換性を維持する必要があります。
Apple は iPhone 全体の開発において有利なだけでなく、iOS プラットフォームと App Store の管理も行っているため、開発者に Metal の採用を促し、古い OpenGL を廃止することでそれを強制することができます。 Android も同様に、誰も制御できないため、未来に進むことができません。そのため、たとえクアルコムが優れたベンチマークを生成できたとしても、ソフトウェアが追いつくまで、拡張現実からユーザー インターフェイスの全体的な滑らかさに至るまで、ユーザーはゲームやアプリケーションで同様のパフォーマンスを実感できないでしょう。
クアルコムは、ビデオ ゲームと、その新しい GPU がモバイル ビデオ ゲームの将来をどのように推進することを目指しているかについて、時間をかけて話し合いました。しかし、そのプレゼンテーションは詳細が不足しており、すぐにメディアの荒らしに近づき、新しい GPU が物理ベースのレンダリングを使用して、より現実的な照明と物理学を通じてゲームと AR にリアリズムを追加する方法をサポートする方法についての愚かな主張をしていました。
しかし、これは全くのナンセンスでした。 PBR はグラフィックを作成するためのソフトウェア アプローチであり、特別なハードウェアを必要とするものではありません。 Apple は、PBR のサポートについて次の記事で議論しました。iOS 10のSceneKit2016 年に遡り、この夏にはリアルな AR シーンを作成するための重要な要素として PBR が実証されました。
PBR は、AR QuickLook を備えた iOS 12 の ARKit 2.0 にも組み込まれています。3D モデルの探索。クアルコムが自社のグラフィックスチップがPBRを導入しているかのように振る舞うことは、インテルが自社のモデムでユーザーが最終的にデジタル音楽をダウンロードできるようになると主張するのと同じだ。
それでもクアルコム、ティブケン、ジェシカ・ドルコートに騙される書きましたのためにCNET, 「同社はまた、『物理ベース レンダリング』と呼ばれる新しい照明とテクスチャ技術を持っています。これにより、レンガに反射する太陽光線の効果を再現することができます。そのレベルの詳細は、以前はモバイル デバイスでは不可能だったとクアルコムは述べています。」 」
それは読者に投げかけられた全くのクソ馬鹿げたものだった。このチップが来年サムスンの状況を好転させるかもしれないという空想の一部だった。どうやらギャラクシーS10に必要なのは、サムスンの中国崩壊を阻止するために、もう少し高速なチップだけだかららしい。そして他の場所でも関心を示しています。
Qualcomm Kyro CPU と Apple の Vortex および Tempest CPU コアの比較
クアルコムはまた、同社がこれまでに生み出した最大の飛躍と称するCPUコアの進歩について詳しく説明し、845に比べてCPU性能が45パーセント向上したと主張した。しかし、クアルコムは、昨年のAppleのA11 Bionicに匹敵するだけでも、それよりも大きな飛躍を必要としている。 Appleの最新チップは言うまでもありません。
クアルコムの「史上最大の飛躍」でも、昨年のアップルのA11 Bionicに匹敵するには十分ではない
855 には 4 つのパフォーマンス コアと 4 つの効率コアがあり、1 つのパフォーマンス コアはパフォーマンスと効率のために独立してクロック制御できるプライム コアとして指定されています。これらの詳細は主に、メディア関係者がどのように評価すればよいのか見当もつかない派手な図で報道機関を騙すために与えられたものです。
サムスンも同様に、より少ないコアを使用した Apple のチップと比較して、Octo-core Exynos 番号フェスタでメディアを驚かせたことに注意してください。追加のコアがすべて現実世界のパフォーマンスに貢献していないことや、効率性を損なっていることは問題ではないようでした。現実には、複数のコアは、それらを活用するソフトウェアを開発できる場合にのみ役に立ちます。
ほとんどのユースケースでは、モバイル ソフトウェアは通常 1 つのコアのみを利用し、OS がバックグラウンド タスクを 2 番目に実行します。シングル コア ベンチマーク スコアが、アプリの実世界のパフォーマンスのより現実的な測定値を示すのはこのためです。
この現実により、Apple は高速に動作し、すぐにアイドル状態になるように設計されたプライマリ コアの数を減らすことに重点を置くようになりました。A9 には 2 つのコアしかありませんでした。 A10 Fusion には、2 つのパフォーマンス コアと 2 つの効率コアが導入されました。 A11 Bionic 以降、Apple は 2 つのプライマリ コアと 4 つの効率コアを組み合わせています。一方、サムスンは、チップが実際のパフォーマンス向けに設計された 1 つまたは 2 つの大きなコアに追いつくことができない場合でも、人為的なベンチマーク テストを実行して見栄えの良いスコアを生成できることを知っていて、ずっと前に小さなコアを多数追加しました。
クアルコムの「プライム コア」設計は、主要なタスク専用の高速クロックのコアが、4 つの同等のコアとさらに 4 つのコアを組み合わせたものよりも優れた設計であることを認めています。ただし、Apple のデュアル モンスター コアほど優れているわけではありません。 Apple の A12 Bionic は、2 つの高性能 Vortex コアと 4 つの Tempest 効率コアを使用しており、電力効率のために必要でない場合はコアをサイクルダウンし、必要な場合には 2 つの大型エンジンを稼働させることができます。
注目すべきは、A11 と A12 Bionic の過去 2 年間、Apple はパフォーマンスについてだけ話していたわけではありません。同社は、Apple A11 よりもパフォーマンス コアが 15% 高速でエネルギー効率が 40% 高く、効率コアの消費電力が半分であると述べて A12 を紹介しました。
クアルコムは、Prime コアのクロックアップにより、以前のオクタコア設計よりも簡単にパフォーマンスを向上させることができるため、パフォーマンスの向上に全面的に焦点を当てました。ただし、そのパフォーマンスや効率を他のアーキテクチャと比較することはありませんでした。その理由は明らかです。
アプリケーション プロセッサ自体の設計を超えて、パフォーマンスと効率の両方は他の要因によっても左右されます。 Apple の iPhone XR と iPhone XS は同じチップを使用していますが、RAM の量が異なるため、パフォーマンスに違いが生じることがわかります。
また、Google プラットフォームの非効率性により、2 GB の RAM を搭載した iPhone のパフォーマンスが 4 GB 以上の Android のパフォーマンスに日常的に及ばないこともわかっています。したがって、クアルコムのチップ自体は、特定の Android が提供するパフォーマンスの要素にすぎません。私たちが知っているもう 1 つのことは、Android は一般に、価格に非常に敏感であるため、リソースに迫られているということです。つまり、ライセンシーが 855 を採用したとしても、Android の実行を強制するなど、その最適なパフォーマンスを損なう安易な行為を行う可能性が高いということです。
これも、クアルコムが自社でプレミアム携帯電話を開発したいと決断しない限り、実際には何もできない問題だ。これは、ハイエンドのモバイルチップを欲しがり、確実に販売できると合理的に保証できる電話パートナーを見つけることよりもさらに難しい問題だ。それらのかなりの量。
テキサス・インスツルメンツとエヌビディアは、先進的なモバイル・チップを開発した後にスマートフォン市場から撤退したが、実際の量では誰も販売できず、継続的な新世代のモバイル・シリコンの開発は持続不可能になったことを思い出してほしい。クアルコムは現在、同じ熱を感じており、新しいAシリーズチップの開発に資金を提供する確固たる信頼性の高いプレミアムバイヤー基盤を持つアップルやサムスン、そして今度はファーウェイと競争している。
Hexagon 対 Apple のニューラル エンジン
クアルコムはまた、ニューラル処理をアプリケーションプロセッサに統合する点でアップル(およびファーウェイ)に匹敵するよう取り組んでいる。 855 には、AI 関連タスクの高速化に特化した Hexagon NPU が含まれています。
クアルコムは、競合するモバイルチップでAIのパフォーマンスが2倍になったと発表したが、どのチップと比較したのか、どのように比較したのかについては言及しなかった。
また、このチップメーカーは Google と提携して、機械学習の一般的なアプリケーションである写真と AR の物体認識を発表し、Google が Google レンズで行う処理の一部をクラウド サーバーから 855 に移行することに取り組んでいることを発表しました。 ML はユーザーのモバイル デバイス上で直接実行されます。これに見覚えがあると思われるなら、それは Apple が写真やその他のアプリですでにこれを行っており、プライバシーやデータ セキュリティ機能としてそのようなオンデバイス処理を推進していることを強調しているためです。
Google は、専用ハードウェアでのローカル処理では、データがモバイル ネットワーク経由で送信され、クラウドで処理されて送り返されるまでの待ち時間が発生しないため、Lens のパフォーマンスにさらに重点を置きました。それは、Google が慈善事業として AI を実行しているわけではないからです。学習目的で山ほどのデータにアクセスするためにやっているのです。 Google に送信されるデータが少なくなると、Lens や Google フォトなどの優れたサービスを構築する価値が低くなります。
Facebook ユーザーのデータに注目している Google やその他の開発者を除けば、Android では、iOS に比べて、興味深い商用 ML アプリケーションはそれほど多くありません。iOS では、Apple がセキュリティとセキュリティを備えた ML モデルのローカル トレーニングと実行をサポートするプラットフォーム全体を設計しています。データプライバシーを主な考慮事項とします。
AI の他の既存のアプリケーションには、光学式文字認識、AR で使用されるコンピューター ビジョン、コンピューテーショナル フォトグラフィー、および音声を明瞭にするための音声処理が含まれます。Apple が Siri の音声をより明確に聞き取れるようにするために、Apple が A シリーズ チップに統合しているのと同じものです。 2011年にiPhone 4Sが登場して以来。
クアルコムのプレスイベントを取材ザ・ヴァージ、チャイム・ガーテンバーグとニック・スタットも書きましたHexagon NPU を搭載した Snapdragon 855 は、「リアルタイム セグメンテーション アルゴリズム」を使用して、あらゆる画像に背景ぼかしを適用できます。これは、「特別なカメラを使用する必要がある iPhone や Pixel デバイスで得られるポートレート モード効果よりも一歩上のもの」と説明されています。モード。"
しかし、それは本当ではありません。背面のデュアルカメラまたは前面の True Depth イメージング システムを備えた iPhone の Apple のポートレート モードは、実際の画像をキャプチャします。深度マップこれを使用してさまざまな効果を作成できます。このテクノロジーは開発者にも悪用される可能性があります。 Pixel は処理を使用して背景がどこから始まるかを計算し、ポートレート モードと同様にぼかし効果を適用します。これにより、優れた画像が得られる場合もあれば、混乱が生じる場合もあります。
クアルコムが同様のアルゴリズムフィルターを計算してあらゆる画像に適用しているという事実は、新しいものでも、特定のタスク専用のカメラ内機能の「一歩上の」ものでもありません。ダイレクトシュートを決めたのは、単なるメディアのいたずらだ。
クアルコムのプレミアムは Android コモディティに結びついている
実際には、機械学習、コンピューター ビジョン、および NPU ハードウェア上で AI を活用して高速化できるその他のタスクのさまざまなアプリケーションは、モバイル アプリ一般と多くの共通点を持っています。つまり、モバイル アプリには、開発ツール、対応可能な市場、ビジネス モデルが必要です。高度なシリコン技術の開発を推進するのは、改造愛好家ではなく、商用プラットフォームです。 Windows はそうしましたが、iOS はこれを行いましたが、Android はそうではありませんでした。 TI、Nvidia、Intel Atom といった Android シリコン プロセッサの墓場が存在するのはそのためです。インテルが補助金に 100 億ドルを費やしたことを思い出してください。4000万Atom チップを搭載した Android タブレット。
Apple は、過去 2 回の WWDC イベントで商用 AI と ML の開発を推進するために必要なすべての要素を揃え、iOS アップデートを通じて数千万人の iPhone ユーザーに広く展開し、サードパーティが同社の先導に倣って価値のある安全な開発を行えるようにしました。 、デバイス上の AI 高速化機能。
Googleはそうではありません。 AI については Tensor Flow で、AR については先んじて話しているにもかかわらず、プロジェクト タンゴ、Googleが行ったことのほとんどは、印象的だがニッチ市場のPixelカメラなど、プロトタイプまたは独自のサービスを構築することです。 Android は、アプリ プラットフォームとして、『フォートナイト』や『スーパー マリオ ラン』などのヒット ゲームの分野でも iOS に追いつくのに苦労しています。 Google の AR は、Android インストール ベースのほんの一部に相当する、選ばれた数のプレミアム携帯電話でのみ動作します。
Android 上で新しい AI および AR 機能を展開するサードパーティへの魅力は、高度な処理を実際にはまったく実行できない低層および中層の Android スマートフォンの大部分と、高層のごく少数の Android スマートフォンとの間の断片化によって特に妨げられています。 Google 独自の Pixel モデルや Samsung の Galaxy S9 などの最終製品は、どちらも Google 自身が新興市場向けの超安価なデバイスに重点を置いているために引きずられています。
Googleは何年もかけて99ドルのAndroidについて話していたが、一転して自社のPixelスマートフォンをiPhoneの価格で販売しようとした。なぜそれがうまくいかなかったのかは謎ではありませんが、この戦略は、プレミアム Android スマートフォン (Samsung Galaxy S9) が崩壊しつつあるにもかかわらず、プレミアム Android 市場の存続を期待しているクアルコムのようなプレミアム コンポーネント ベンダーにも打撃を与えています。 )枯れつつある(Pixel 3)か、カスタムプロセッサを搭載した中国製モデル(Huawei)に置き換えられています。
クアルコムは、自社の855がサムスンと、Oppoのより高級な子会社ブランドであり、Vivoも生産する巨大企業BBKエレクトロニクスの一部であるOnePlusによって販売されることに大きな賭けをしている。しかし、今後もSnapdragon開発の競争力を維持するには、よりプレミアムなAndroidの間でより幅広いサポートを見つける必要があるのは間違いありません。
世界最大の高級携帯電話ベンダーのモデム事業をインテルに奪われたことは壊滅的な打撃であり、ファーウェイによるさらなる地位の侵害はまったく役に立たない。そして、Google の Pixel が図らずも示しているように、iPhone に似た派手な Android 携帯電話を作ることはできますが、より安価な代替品がたくさんあるため、それにお金を払う Android ファンは十分にいません。それを表面効果と呼ぶかもしれません。
クアルコムの Spectra 380 ISP と Apple の ISP
Apple は自社の NPU を「Neural Engine」と名付けましたが、同様に新しい GPU や、コンピューテーショナル フォトグラフィーに関連する特殊なタスクを処理する ISP であるイメージ シグナル プロセッサーにも派手なマーケティング名を与えませんでした。同社独自の ISP が長年にわたって iOS カメラ アプリの重労働を行ってきたことを考えると、これは注目に値します。
クアルコムは、855 の ISP に Specta 380 という名前を持っています。Qualcomm は、自分のできることを誇示することに熱心でした。ザ・ヴァージ概要には、「60 fps で深度センシングが可能で、ポートレート モードのプレビューなどをリアルタイムで (事後の処理を必要とせずに) 実行できるほか、4K 解像度のリアルタイム HDR を使用したポートレート モードのビデオも可能になる」と記載されています。クアルコムは、同様の技術を使用して、ライブ映像内の人物の背後の背景を完全に置き換える、アドホックなグリーン スクリーン スタイルのエフェクトも披露しました。」
ただし、ビデオベースの深度効果は新しいものではありません。この夏に実証されましたWWDCで。 Apple 自体にはビデオの背景をぼかすカメラ モードはありませんが、サードパーティの開発者はビデオの深度マスク データを使用してあらゆる種類の効果を実現できます。
Apple Clip は、背景の置き換えと前景効果のためのビデオ深度効果をすでにサポートしています
子どもたちはすでに Apple の Clips などのアプリを使って、背景の置き換えや前景の効果に「グリーン スクリーン スタイルの効果」を実行できるため、メディアの巧妙な活用が達成されたこと以外に何が新しいのかを理解するのは困難です。
クアルコムが行っている興味深い一歩は、Apple が 2 年前にサポートを導入した新しい画像形式である HEIF のサポートの追加です。これにより、JPEG の圧縮率が効果的に 2 倍になり、ファイルごとに複数の写真 (バースト キャプチャ) やコンテキスト ビデオなどのさまざまな機能がサポートされます。画像に追加されました(Apple Live Photo)。クアルコムの動きは、これまでのところ(まだ広く使用されていない)最新バージョンのAndroidでのみソフトウェアをサポートしているハードウェア圧縮を一部の新しいAndroidに導入することで、このフォーマットの採用を拡大することになる。