iOS 18 プロジェクト Greymatter は AI を使用して通知や記事などを要約します

Apple の次世代オペレーティングシステムには Project Greymatter が搭載され、AI 関連の多数の機能強化がもたらされます。 Siri、メモ、メッセージ向けに計画されている AI 機能に関する新しい詳細が明らかになりました。

iOS 18 の AI 関連の機能強化に関する広範な主張と報告を受けて、AppleInsiderAI分野におけるAppleの計画に関する追加情報を入手しました。

事情に詳しい関係者らは、同社が年次総会に先立ってさまざまな新しいAI関連機能を社内でテストしていることを明らかにした。WWDC。プロジェクトコード名「Greymatter」で知られる同社のAI改善は、エンドユーザーにとっての実際的なメリットに焦点を当てている。

Apple のオペレーティングシステムのプレリリースバージョンでは、同社は「Greymatter Catch Up」として知られる通知要約機能に取り組んできました。機能が関連付けられているのは、シリつまり、ユーザーは仮想アシスタントを通じて最近の通知の概要を要求し、受け取ることができるようになります。

Siri は、新しいスマート応答フレームワークと Apple のオンデバイス LLM を通じて、大幅に更新された応答生成機能を受け取ることが期待されています。 Siri は、返信や要約を生成するときに、人や会社、カレンダーのイベント、場所、日付などのエンティティを考慮できるようになります。

以前のレポートでは、サファリ18、アヤックスLLM、そしてボイスメモを更新しましたアプリ、AppleInsiderApple が、AI を活用したテキストの要約と文字起こしを自社の組み込みアプリケーションに導入する計画であることが明らかになりました。その後、同社がこれらの機能を Siri にも導入する予定であることが分かりました。

これは最終的に、Siri がデバイス上でクエリに答えたり、長い記事の要約を作成したり、更新されたメモやボイスメモアプリケーションと同様に音声を文字に起こしたりできることを意味します。これはすべて、Ajax LLM またはより複雑なタスクのクラウドベースの処理を使用して行われます。

また、Apple は強化された「より自然な」音声とテキスト読み上げの改善をテストしており、最終的にはユーザーエクスペリエンスが大幅に向上するはずであるとも言われました。

Apple は、Siri のクロスデバイスメディアと TV コントロールにも取り組んでいます。この機能により、たとえば、誰かが自分の端末で Siri を使用できるようになります。アップルウォッチ別のデバイスで音楽を再生できますが、この機能は 2024 年後半になる予定です。

同社は、さまざまなユースケースとタスクを念頭に置いて、いくつかのコアシステムアプリケーションに人工知能を組み込むことを決定しました。注目すべき改善点の 1 つは、写真の編集に関するものです。

Appleは画像編集を改善するための生成AIソフトウェアを開発しました

iOS18とmacOS 15は期待されるAI を利用した写真編集オプションを写真などのアプリケーションに提供します。 Apple は社内で、ユーザーが生成 AI ソフトウェアを使用して画像からオブジェクトを削除できる新しいクリーンアップ機能を開発しました。

クリーンアップツールは、Apple の現在のレタッチツールを置き換えます。

また、Project Greymatter に関連して、同社は「Generative Playground」という名前で知られる社内用アプリケーションを作成しました。アプリケーションに詳しい関係者が独占公開AppleInsiderApple の生成 AI ソフトウェアを利用して画像を作成および編集できること、およびその機能が特徴であることiメッセージ専用のアプリ拡張機能の形式での統合。

Apple のテスト環境では、人工知能を通じて画像を生成し、iMessage を通じて送信することが可能です。同社がオペレーティングシステムのエンドユーザー向けに同様の機能を計画しているという兆候があります。

この情報は別の情報と一致します報告ユーザーは AI を使用して独自の絵文字を生成できると主張していますが、画像生成機能には追加の可能性もあります。

事情に詳しい関係者によると、AppleのNotesアプリケーションのプレリリース版にも生成ツールへの参照が含まれているが、Generative Playgroundアプリの場合と同様、このツールがテキストや画像を生成するかどうかは不明だという。

Apple は、組み込みの Notes アプリケーションの大幅な機能強化を準備しており、iOS18更新された Notes では、アプリ内音声録音、音声転写、LLM を利用した要約がサポートされます。

iOS 18のメモアプリはアプリ内での音声録音、文字起こし、要約をサポートします

音声録音、文字起こし、テキストベースの要約はすべて、ユーザーが追加することを選択した他の資料とともに 1 つのノート内で利用できます。これは、たとえば、1 つのメモに、ホワイトボードの画像とテキストを備えた講義や会議全体の記録を含めることができることを意味します。

これらの機能により、Notes は真の強力なアプリとなり、学生とビジネスプロフェッショナルの両方にとって頼りになるアプリとなるでしょう。音声文字起こしや要約機能を追加することで、Apple の Notes アプリケーションは Microsoft の OneNote や Otter などの競合製品に対して有利な立場に立つことも可能になります。

アプリケーションレベルでの音声録音のサポート、および AI を利用した音声転写および要約機能はすべて、Notes アプリを大幅に改善しますが、Apple が取り組んでいるのはそれだけではありません。

数学ノート — AI を使用してグラフを作成し、方程式を解きます。

Notes アプリには、Math Notes の形でまったく新しい追加機能が追加され、適切な数学表記のサポートが開始され、Apple の新しい機能との統合が可能になります。GreyParrot 電卓アプリ。数学ノートにどのような内容が含まれるかについて、さらなる詳細が明らかになりました。

iOS 18 のメモアプリは、AI 支援による音声文字起こしと数学メモのサポートを導入します

この新機能に詳しい関係者によると、Math Notes を使用すると、アプリが数式の形でテキストを認識し、その解を提供できるようになるという。グラフ式のサポートも準備中です。つまり、Grapher アプリに似たものが、macOSただし、Notes 内で。

Apple はまた、「キーボード数学予測」として知られる機能の形で、数学に関連する入力に重点を置いた機能強化にも取り組んでいます。AppleInsiderこの機能により、数式がテキスト入力の一部として認識されるたびに、その数式を補完できるようになるとのことでした。

これは、ユーザーが Notes 内で、Apple が現在予測テキストやインライン補完を提供しているのと同様の方法で数式を自動補完するオプションを受け取ることになることを意味します。iOS- これらもまた、ビジョンOS今年後半に。

Apple のvisionOS では、入力時に候補を提示する予測テキストモデルである Apple の Transformer LM との統合も強化されます。このオペレーティングシステムには、再設計された音声コマンド UI も搭載される予定で、これは Apple が入力関連の機能強化をどれだけ重視しているかを示す指標として機能します。

同社はまた、メッセージ、メール、Siri で利用できる、いわゆる「スマートリプライ」の使用を通じてユーザー入力を改善することも目指しています。これにより、ユーザーは、Apple のオンデバイス Ajax LLM によって即座に生成される基本的なテキストベースの応答でメッセージや電子メールに返信できるようになります。

Apple の AI と Google Gemini およびその他のサードパーティ製品の比較

AI は事実上あらゆるアプリケーションやデバイスに導入されています。 OpenAI の ChatGPT や Google Gemini などの AI に重点を置いた製品の使用も、全体的な人気が大幅に高まっています。

Google Gemini は人気のある AI ツールです

Appleは自社の地位を向上させるために独自のAIソフトウェアを開発しましたが、競争に反対する、同社の AI は Google Gemini Advanced のようなものほど印象的ではありません。AppleInsider学んだ。

毎年恒例のGoogle I/O5 月 14 日の開発者カンファレンスで、Google は人工知能の興味深い使用例を紹介しました。ユーザーがビデオ形式で質問すると、AI が生成した応答や提案を受け取ることができます。

イベントの一環として、GoogleのAIは壊れたレコードプレーヤーのビデオを見せられ、なぜ動作しないのか尋ねた。ソフトウェアはレコードプレーヤーのモデルを特定し、レコードプレーヤーのバランスが適切に調整されていない可能性があり、そのために動作しないことを示唆しました。

同社も発表したグーグル・アイ・スパイ- 人工知能を使用してビデオを生成できるソフトウェア。 OpenAI には、次のような独自のビデオ生成モデルもあります。ソラ。

Apple の Project Greymatter と Ajax LLM はビデオを生成または処理できません。これは、同社のソフトウェアが消費者製品に関する複雑なビデオの質問に答えることができないことを意味します。おそらくこれが、Apple がライセンス契約を締結し、より多くの機能を自社のユーザーベースに利用できるようにするために、Google や OpenAI などの企業と提携しようとした理由と考えられます。

Appleは確立されたハードウェア上で垂直統合されたAIソフトウェアを提供することで、Rabbit R1のような製品と競合するだろう

Humane AI Pin や Rabbit R1 などの物理的な AI をテーマにした製品と比較して、Apple の AI プロジェクトには、ユーザーがすでに所有しているデバイス上で実行できるという大きな利点があります。これは、ユーザーが人工知能のメリットを享受するために特別な AI デバイスを購入する必要がないことを意味します。

Humane の AI Pin と Rabbit R1 も一般に未完成または部分的に機能する製品とみなされ、後者は明らかにしたカスタム Android アプリケーションにすぎません。

AppleのAI関連プロジェクトは、同社の年次総会でデビューすると予想されているWWDCiOS 18 および macOS 15 の一部として 6 月 10 日にリリースされます。カレンダー、フリーフォーム、そしてシステム設定アプリケーションも開発中です。