「Click To Do」は、Android の「Circle To Search」に対する Windows 11 の回答であり、AI オーバーレイです…

知っておくべきこと

• Microsoft は今年後半に、Click To Do と呼ばれる新しい AI スクリーン アナライザーを Windows 11 向けにリリースする予定です。
• Click To Do は Android の Circle To Search と同様に動作し、ユーザーは画面上で選択した要素に基づいて Web をすばやく検索できます。
• Click To Do は、現在画面に表示されている内容に基づいたコンテキスト アクションをさらに一歩進めます。 
• Click To Do は Copilot+ PC 専用です。

Microsoftは、今年後半にCopilot+ PC向けに提供される大型の新機能AIを発表しました。この機能は、OSにインテリジェントなオーバーレイを追加し、画面上の内容を理解し、状況に応じたアクションをいつでも提供できるようになります。オーバーレイは、Windowsキーを押しながらマウスをクリックすることで起動します。

この機能は「Click To Do」と呼ばれ、Androidの「Circle To Search」機能と明らかに競合しますが、より高機能です。ウェブを視覚的に素早く検索できるだけでなく、画面に表示されている内容に基づいて文脈に沿った候補も表示します。 

例えば、テキストを選択した場合、Click To Do はハイライトされた内容を要約したり、書き直したりするなどのアクションを提案します。画像を選択した場合、Click To Do は背景をぼかしたり、画像内の選択されたオブジェクトを消去したりするなどのクイックアクションを提案します。

Click To Doオーバーレイでは、画面上部にフローティング表示される専用の検索バーを使って、画面上のあらゆる項目を検索できます。また、このインターフェースからはWindows Recallへのクイックアクセスも可能で、RecallとClick To Doはどちらも画面上の内容を認識するために同様の技術を使用しています。 

そのため、Click To DoはNPUが40 TOPS以上のCopilot+ PCでのみご利用いただけます。つまり、Copilot+ PCをご利用でない場合、今年後半にはこの機能をご利用いただけなくなります。Copilot+ PCでのClick To Doのテストは10月から開始され、11月以降、段階的に展開される予定です。

Click To Doは、生産性の観点からAIが役立つ例です。これは、タスクやユーザー体験を効率化するために設計された機能で、現在画面に表示されている内容に基づいて、ユーザーが最も実行したいと思われる状況に応じたアクションを提案します。生産性向上ツールとしてのAIは、まさに最高のAIと言えるでしょう。

マイクロソフトは、Windows SearchへのAI追加など、Copilot+ PCに今秋導入されるAI機能も発表しました。また、より人間的でインタラクティブな全く新しいCopilotエクスペリエンスも本日リリースします。このエクスペリエンスは、ユーザーと一緒にWebを閲覧したり、Copilot Visionでタスクを支援したりすることができます。