知覚するエコシステム:AppleがApple Intelligenceの次世代アーキテクチャを発表

あらゆる領域に浸透するAI統合

Appleはこのほど、Apple Intelligenceの画期的な新世代を発表しました。同社は、主要なデバイスとアプリケーションのほぼ全域にわたって、ネイティブのAI機能を大幅に拡張しています。今回の強化により、写真、Safari、パスワード、メッセージ、メール、電話、カレンダー、ショートカット、そしてホームアプリが刷新されます。現時点では、開発者向けの早期ソフトウェアビルドを通じて初期機能を評価できます。なお、Appleは今秋に一般向けの全面展開を予定しています。

アーキテクチャの刷新とプライバシー基準

今回の最大の変革は、基盤となるコアソフトウェア設計にあります。新機能はいずれも、次世代のApple Foundation Models上で動作します。これらの高度なシステムは、GoogleおよびそのGeminiフレームワークと緊密に連携して開発されました。その結果、基本的なワークフローはデバイスのローカルハードウェア上で直接処理されます。一方、より複雑な計算処理はPrivate Cloud Compute(プライベートクラウドコンピューティング)を介して実行されます。Appleはこのフレームワークによって完全なデータ分離を保証すると主張しており、サーバー上に外部テレメトリーが残ることはなく、独立した専門家がセキュリティアーキテクチャを継続的に監査できるとしています。

Siriとメディア操作の再定義

Siri AIの誕生

バーチャルアシスタントは間もなく、大規模なアルゴリズムの刷新を受けます。この新しいエコシステムは正式に「Siri AI」と命名されています。アシスタントはリアルタイムのコンテキストデータをより高度に理解できるようになり、ローカルのメッセージ、メール、写真、さらにサードパーティ製ツールを横断してデータをシームレスに取得します。また、Siri AIは将来的に専用のスタンドアロンアプリケーションとして独立したインターフェースを持つ予定です。Appleはこれらの機能を今会計年度後半にベータ版として提供する計画です。

高度な写真編集機能

標準の写真アプリには、洗練された生成的編集ツール群が新たに追加されます。たとえば「スペーシャルリフレーミング」と呼ばれる機能では、撮影後に画像の構図を動的に変更することができます。ユーザーは視点を自在に移動させることができ、生成モデルが不足した余白部分をシームレスに補完します。また「拡張」ツールは写真の境界を広げ、強制的なトリミングなしに傾いた水平線を補正します。さらに「クリーンアップ」ユーティリティは、不要な要素を精度高く除去し、複雑な背景を自然に再構成します。なお、Apple Intelligenceによって加工されたすべての画像には、SynthIDによる不可視の暗号透かしが埋め込まれます。

Web体験の洗練とセキュリティの自動化

Safariにおけるインテリジェントナビゲーション

Safariには、生産性向上を目的とした複数のインテリジェント機能がネイティブで搭載されます。具体的には、ブラウザがアクティブなタブをコンテキストに応じたテーマごとに自動でグループ化します。たとえばユーザーが旅行の計画を立てている場合、Safariは予約情報や地図を一つのグループに集約します。また、新機能「通知する」は、オンラインストアの変化をリアルタイムで監視し、価格の値下がりや在庫の更新が発生した際に即座に通知を送信します。

漏洩した認証情報の自動修復

スタンドアロンのパスワードアプリは間もなく、漏洩した認証情報の修復を自動化できるようになります。Apple Intelligenceが自律的に対象ドメインにアクセスし、脆弱なパスワードをローテーションします。この保護サイクルはユーザーの操作をほぼ必要とせずにシームレスに実行されます。さらにSafariには「拡張機能を説明する」インターフェースも導入されます。ユーザーが自然言語で求める機能を説明するだけで、ブラウザが対応するツールをツールバーに直接作成します。

表現力豊かなコンテンツ生成とコンテキスト連携

Image Playgroundの強化

Image Playgroundのワークスペースは、クラウドベースの合成モデルによって大幅な処理能力の向上を果たします。ユーザーは全く新しいビジュアル素材を作成したり、タッチベースのセグメンテーションを使って既存の画像を精緻に編集したりすることができます。また、直感的なテキストプロンプトを通じて要素のサイズ変更やシーンの変更も可能です。生成されたコンテンツは、ロック画面の壁紙からデジタルチラシまで、複数の形式で出力できます。もちろん、これらのファイルにもSynthIDのトラッキングタグが継承されます。

メッセージ・通話のコンテキスト連携

メッセージとメールには、高度に直感的なコンテキスト連動レコメンデーション機能が追加されます。会話相手がメディアファイルを求めた場合、システムが高度なキーワードマッピングを使ってローカルライブラリを自動的に検索します。さらに、ワンタップでカレンダーのリマインダーやメモを作成することも可能です。スマート返信機能も、ユーザー個人の文体を動的に学習して適応します。

また、電話アプリには「コール コンテキスト」機能が追加されます。認証済みの企業に電話をかけると、デバイスがメールから抽出した予約コードなどの関連情報を画面に表示します。この処理は会話を録音するのではなく、メタデータを解析する方式で行われるため、プライバシーは完全に保護されます。

自動化、スマートホーム、アクセシビリティ

自然言語による自動化

カレンダーアプリは間もなく、構造化されていない平易なテキストの説明から複雑なイベントを自動生成できるようになります。システムが参加者、場所、タイトルを自動的に識別します。同様に、ショートカットには「ショートカットを説明する」コンパイラが導入されます。このユーティリティは、基本的なテキスト入力から高度な自動化フローを構築します。たとえば、最も近いカレンダーの予定に基づいてアラームを設定するよう指示することも可能です。

スマートホームの効率化

ホームエコシステムでは、インテリジェント機能が繰り返し発生するスマートホームのアラートを一枚のイベントカードに集約します。これにより、セキュリティセンサーからの過剰な通知に悩まされることがなくなります。また、HomeKitセキュアビデオのカメラは録画クリップの簡潔なテキストサマリーを生成します。手動で再生しなくても、セキュリティイベントを素早く確認できるようになります。

ユニバーサルデザインとアクセシビリティの強化

最後に、Appleはアクセシビリティフレームワークに大規模なアップグレードを施します。VoiceOverは複雑な画像や物理的な環境を高精度に言語化して説明できるようになります。また「ライブ認識」機能により、ユーザーはアクションボタンを通じて周囲の状況を照会できるようになります。音声コントロールは厳格なコマンド入力ではなく、日常的な会話調のテキストを解釈することで操作が簡略化されます。さらに、刷新されたアクセシビリティリーダーは、難解な技術文書を手軽に要約する機能を提供します。

システム全体の文法補正機能、インテリジェントなフォルダ提案、ローカライズされたワークアウトバディ機能も、この大規模なアップデートの一部として提供されます。Appleは人工知能を独立したユーティリティとして分断するのではなく、人々の日常的なワークフローに深く織り込むことを目指しています。Apple Intelligenceの真価は、今秋の世界展開においてリアルな日常タスクによって試されることになります。

翻訳元: https://meterpreter.org/apple-intelligence-feature-upgrades/

ソース: meterpreter.org