Appleは、Apple Intelligence機能セットの一環として、より高度なSiri機能を開発中であり、その準備として開発者にApp Intent APIを提供しています。最新のベータ版では、開発者のアプリ内の画面コンテンツをSiriやApple Intelligenceが利用できる新しいAPIが追加されました。このAPIにより、ユーザーが画面のコンテンツについて質問したり、アクションを実行したりすると、Siriはそのコンテンツを取得して応答します。また、ユーザーが明示的にリクエストすることで、Siriはサポートされているサードパーティサービスにコンテンツを送信することができます。
さらに、iOS 18.2ベータ版では、ChatGPTとの統合がSiriに追加され、ユーザーは写真やPDF、プレゼンテーションについて質問できるようになっています。例えば、「この写真には何が写っている？」とSiriに尋ねると、Siriがスクリーンショットを撮り、それをChatGPTに送信して内容を説明する機能があります。ただし、これはAppleが計画している画面認識機能とは異なる可能性があります。画面認識とは、Siriが画面上の情報を理解し、処理する能力を指しますが、iOS 18.2には未実装であり、ChatGPTの機能はスクリーンショットの解析に制限されています。
Appleは、これらのSiri機能が今後のiOS 18のバージョンに登場することを示唆しており、Bloombergのマーク・ガーマン氏によれば、iOS 18.4でのリリースが2025年春を予定しています。Appleは、デベロッパーが事前にAPIを受け取ることで、機能をパブリック向けに準備できるようにしているとのことです。
