Raycastは「スクリーンアウェアネス」という新機能を発表し、ユーザーがアクティブなアプリケーションやウィンドウのコンテキストをAIチャットに直接持ち込むことができるようになりました。以下はこの機能に関する詳細情報です。
Raycast AIは、あなたのスクリーン上のコンテンツを利用できるようになりました。AIチャットボットを使用する方法に応じて、例えば ChatGPT、Claude、またはRaycast AIなど、テキストを何度もコピー＆ペーストしたり、スクリーンショットをアップロードしたり、処理しているコンテキストを説明したりしてからヘルプを求める必要がありました。Raycastは最近、この機能を更新し、作業フローを簡素化することを目指しています。これにより、Raycast AIはフォーカスされたウィンドウの内容に直接アクセスできるようになります。この「スクリーンアウェアネス」機能は、「あなたがフォーカスしているアプリケーションやウィンドウのコンテキストをAIチャットやクイックAIに持ち込むことができるため、テキストをコピーしたり、スクリーンショットを添付したり、見ている内容を説明したりする必要がありません。」
Raycastのスクリーンアウェアネス機能がユーザーの作業フローを簡素化
ユーザーは「フォーカスウィンドウをAIに送信」コマンドを使用し、@メニューからスクリーンアウェアネスを選択するか、「これを要約して」または「これに返信して」と直接リクエストすることができます。機能を有効にすると、Raycast AIに送信されるコンテキストには、アプリケーションやウィンドウの詳細情報、選択されたテキスト、フォーカスされたコントロール、およびフォーカスされたウィンドウのスクリーンショットが含まれる場合があります。Macでは、Finderからトリガーされた場合、選択したファイルやフォルダに関する情報も提供され、Raycastのブラウザパートナーは現在のスクリーンに表示されている内容の上にウェブページの詳細情報やコンテンツを抽出できます。
同社によると、ユーザーは初めてこのコマンドを使用する際に表示される簡単なガイドを通じて、スクリーンアウェアネスをトリガーするためのホットキーを設定できます。Raycastは、チームが「右側のCommandキーをダブルクリックするのが好きだ」と述べています。ユーザーは「選択したテキストをAIに送信」、「スクリーン領域をAIに送信」、「スクリーンをAIに送信」などの関連コマンドに対してもキーボードショートカットを設定できます。以下はこの機能の実際の使用例です：
さらに、Raycast v0.71に含まれる新機能には、AI：フォーカスウィンドウをAIに送信するコマンドにより、より豊富なアプリケーションとウィンドウのコンテキストが含まれるようになりました；AI：「スクリーンアウェアネスをリクエスト」するAI拡張が追加され、Raycast AIのコンテキストを迅速に提供；AI：圧縮とコンテキスト管理のサポートが追加；クイックAI：「メッセージを送信」するAI設定が現在クイックAIでも尊重され、Command Returnでクエリを送信できるようになりました；ディクテーション：他のアプリケーションから語彙やホットキーをインポートする新しい方法が追加；ディクテーション：「語彙に単語を追加」するコマンドが新たに追加され、選択した単語や入力したパラメータを語彙に追加できるようになりました；フィードバック：「フィードバックをリクエスト」するAI拡張が追加され、Raycastチームに連絡できます；ホットキー：キーボードの両側で修飾キーを保持する和音のサポートが追加され（例：左側の⌘ + 右側の⌘）、ホットキー記録器での録音と表示が含まれます。
Raycastの最新の更新に関する詳細情報については、以下のリンクをクリックしてください。