本文へ移動
KX3
AI・ローカルLLM / 約3分

Siri AIは何が変わる?パーソナルコンテキスト、画面認識、Foundation Modelsを整理

Appleが発表したSiri AIを、パーソナルコンテキスト、オンスクリーン認識、Foundation Models、KX3/Konohana 6との関係まで整理する。

By admin@@
Appleが発表したSiri AIのイメージ。出典:Apple

AppleのSiri AIは、従来の音声アシスタントを大きく再設計した新しいSiriだ。Apple Intelligenceを基盤に、ユーザーのメッセージやメール、写真などを横断して必要な情報を見つけるパーソナルコンテキスト、画面上の内容を理解するオンスクリーン認識、ウェブから最新情報を取得する幅広い知識、アプリをまたいだ操作を組み合わせる。

Appleが発表したSiri AIのイメージ。出典:Apple
Siri AIはiPhone、iPad、Mac、Apple Watchなど複数の製品へ統合される。画像出典:Apple

パーソナルコンテキストで「自分の情報」を探す

Siri AIは、メッセージ、メール、写真などに含まれる情報から、ユーザーが今必要としている内容を検索できる。Appleは例として、友人から送られたレストランの情報や、古いメールにあるホテルの予約番号を探す使い方を挙げている。Spotlightと連携したサードパーティアプリの情報にも拡張できる。

画面を理解し、そのままアプリを動かす

オンスクリーン認識では、現在表示している内容に関連する質問へ答えたり、その内容を使って別のアプリで操作したりできる。Appleが示した方向性は「アプリを開くSiri」から「画面や文脈を理解して処理まで進めるSiri」への移行だ。

Foundation ModelsとPrivate Cloud Compute

Siri AIは、端末上で動くApple Foundation Modelsと、必要に応じてPrivate Cloud Compute上のモデルを組み合わせる。Appleは、Private Cloud Computeで処理する場合も個人データを保存せず、Appleからもアクセスできない設計だとしている。また、Spotlight indexやApp Toolboxなどのコア機能は端末内で動作する。

専用SiriアプリとVisual Intelligence

新しいSiriには会話履歴を確認できる専用アプリが用意され、iCloudを通じて複数デバイス間で履歴を同期する。Visual Intelligenceも拡張され、iPhoneのカメラ、iPadのスクリーンショット、Macの画面選択などから画像や表示内容について質問できる。

KX3の見方:Konohana 6で真似すべきはモデルではなく「構造」

KX3の開発視点では、Siri AIで最も参考になるのはモデルの大きさではなく、ローカルモデル、コンテキスト、ツール実行、OSの検索基盤を組み合わせる構造だ。Konohana 6をKX3 AIの会話・ローカル推論層として残しつつ、Foundation Models、App Intents、SpotlightなどAppleの公開APIを接着剤として使う構成は相性がよい。

ただし、Siriが利用できるメールやメッセージのパーソナルコンテキストをサードパーティ製LLMへ自由に渡せるという意味ではない。KX3側で実装する場合は、Appleが公開するAPIとユーザーが許可した範囲を前提に設計する必要がある。

提供時期

AppleはSiri AIをiOS 27でベータ展開する。英語向けを先行し、日本語を含む複数言語への対応を順次広げるとしている。機能や地域によって提供条件が異なる点には注意したい。

出典:Apple Newsroom「Apple introduces Siri AI」

Next read

関連記事

“Siri AIは何が変わる?パーソナルコンテキスト、画面認識、Foundation Modelsを整理” への1件のフィードバック

コメントを残す

メールアドレスが公開されることはありません。 ※ が付いている欄は必須項目です