Windows 11 バージョン 24H2 (2024 アップデート) の AI の新機能

  • abmhh
  • 0 comments
Windows 11 バージョン 24H2 (2024 アップデート) の AI の新機能
Windows リコールアイコン
Windows Recallアイコン (画像提供:Windows Central)

Windows 11 は 3 回目の機能アップデートを受け取りますが、この新しいバージョンは、これまでに見たことのない多数の新しい AI イノベーションを導入しているため、他のバージョンとは異なります。

バージョン 24H2 (2024 アップデート) の一部として、オペレーティング システムでは新しい Windows Copilot ランタイムが導入され、これにより、Windows Recall、ライブ キャプション、自動スーパー解像度、音声の明瞭性、スタジオ効果、その他の AI 機能など、多くの AI 機能を一部の受信トレイ アプリで実行できるようになります。

このガイドでは、Windows 11 2024 Update で利用可能になると予想される AI 機能について詳しく説明します。(この記事の執筆時点では、これらの機能がいつ利用可能になるかはまだ不明ですが、Windows 社によると、一部の機能は 2024 年 11 月中にリリースされる予定です。)

Windows 11 2024 UpdateでAIにどのような変更が加えられるのか

今回の機能アップデートでは、Microsoft は AI を活用した 10 近くの機能を追加します。そのほとんどは、インターネットに接続せずにローカルで動作します。

Windows コパイロット ランタイム

まず、Windows 11 の AI の核となる Windows Copilot ランタイムから始めましょう。これはオペレーティング システム内の「レイヤー」であり、デバイス上でローカルに実行できる 40 種類以上の AI モデルを統合します。

Windows コパイロット ランタイム

(画像提供:Microsoft)

これらのAIモデルには、MicrosoftのSmall Language Model(SLM)であるPhi Silicaが含まれます。これは、Large Language Model(LLM)の多くの利点を備えています。さらに、Screen Region Detector(画面領域検出)、Optical Character Recognizer(光学文字認識)、Natural Language Parser(自然言語パーサー)、Image Encoder(画像エンコーダー)といったモデルもご利用いただけます。

Copilot ランタイム AI モデル

(画像提供: Microsoftq)

この統合の一環として、Windows Copilot ライブラリも提供されます。これは、開発者がアプリケーションにAI機能を容易に統合できるようにするAPI(アプリケーション プログラミング インターフェイス)のコレクションです。このライブラリは、コンピューター上でパッシブに実行され、常に新しいAI機能を有効にする準備ができています。

Windows と Xbox の熱狂的なファンのための最新ニュース、レビュー、ガイド。

Copilot など、クラウドに依存する AI 機能もありますが、Windows Copilot ランタイムを使用すると、クラウドにデータを送信せずに多くの機能をローカルで実行できます。

Windowsのリコール

Recallは、Windows 11(バージョン24H2)に搭載される機能の中で、おそらく最も期待され、かつ最も物議を醸している機能でしょう。この機能は、ユーザーが行っているあらゆる操作のスクリーンショットを常時撮影し、デバイス上で動作する複数のAIモデルとNPU(ニューラル・プロセッシング・ユニット)を用いて(文字通り)記録します。そして、コンテンツとコンテキストを分析し、デバイス上のすべての情報を新しいWindows Semantic Indexに保存します。

何かを探す必要があるときはいつでも、「Recall」アプリを起動して自然言語で検索したり、タイムラインスライダーを使って時間を遡ったりできます。スナップショットを選択すると、スクリーンレイがコンテンツへのインタラクションを容易にし、テキストや画像をコピーできるようになります。

スナップショットでアプリを思い出す

(画像提供:マウロ・フクラク)

利用可能なコントロールを使用して、アプリケーションまたは Web サイトを開いたり、共有、削除したり、Snipping Tool でスナップショットを開いたりすることもできます。

この機能には、スナップショットとインデックスデータベースを保存するためのストレージが必要です。デフォルトのストレージ割り当ては、256GBのハードドライブを搭載したコンピューターの場合25GBで、ストレージドライブのサイズに応じて割り当てが増加します。

設定アプリでは、機能の状態、ストレージ、およびリコール エクスペリエンスに参加する Web サイトとアプリを除外するためのフィルターを制御するための新しい「リコールとスナップショット」ページが追加されます。

Windows のリコール設定

(画像提供:マウロ・フクラク)

Microsoft Edge や Google Chrome などの Chromium ベースのブラウザーで InPrivate または Incognito を使用している場合、Windows Recall は Web サイトを追跡しないことに注意することが重要です。また、フィルター設定を使用して、機能による追跡を望まない特定の Web サイトを除外できます。

この機能は多くの場合便利ですが、ユーザーの信頼を得られていないため、依然として物議を醸しています。セキュリティとプライバシーに関する懸念は数多く存在し、その一部についてはMicrosoftが対策を講じています。

同社がこの機能の初公開時には、リコールデータは暗号化されずにデバイス上に保存され、誰でも取得可能だったが、機能の新たな変更により、このデータは暗号化され、Windows Recall を使用してアプリで検索するには認証が必要となる。

この機能は、今年後半に Copilot+ PC 専用として利用可能になります。 

クリックして実行

Windows 11 の「Click to Do」は、Android デバイスの「Circle to Search」と同様に、画面上のコンテンツを理解し、いつでも関連するアクションを提案できる新しい AI 機能です。

Windows 11 Copilot+ の機能

新しい Click To Do UI。(画像提供: Microsoft)

「Click To Do」を起動するには、「Windowsキー」を押しながら画面上の任意の場所をクリックすると、認識した内容に基づいたコンテキスト提案を表示するオーバーレイが表示されます。例えば、テキストを選択した場合は、Click To Do が要約や書き直しを提案することがあります。画像を選択した場合は、背景をぼかしたり、オブジェクトを消去したりすることが提案されるかもしれません。

主な機能には、画面上の内容に基づいたコンテキストアクションなどがあります。専用の検索バーを使って画面上のあらゆるものを検索できるほか、Windows Recallとの統合により画面上のコンテンツの意味を理解します。 

この機能は、今年後半に Copilot+ PC 専用として利用可能になります。 

AI搭載Windows Search

Microsoft は、Windows Search 機能も更新する予定です。これにより、タスク バー、ファイル エクスプローラー、設定アプリから Windows Search エクスペリエンスで自然言語を使用して検索できるようになります。

Windows 11 Copilot+ の機能

AI検索により、説明的な言語でファイルを検索できます。(画像提供:Microsoft)

つまり、ファイル名、メタデータ、コンテンツなどのキーワードに頼る必要がなくなります。ファイル、写真、設定などを説明すれば、この機能がそれを検索してくれるはずです。 

この機能は、今年後半に Copilot+ PC 専用として利用可能になります。 

Windows Studio エフェクト

Windows Studio Effectsは、NPUを使用してウェブカメラやマイクに特殊効果を適用する機能のコレクションです。この機能は全く新しいものではありませんが、バージョン24H2以降、Microsoftは対応デバイス向けに広く提供を開始する予定です。

エフェクトの一部として、デバイスで利用可能なサポートに応じて、背景ぼかし、アイコンタクト、自動フレーミング、ポートレートライト、クリエイティブ フィルター、音声フォーカスにアクセスできます。

「スタジオエフェクト」ページを使用してクイック設定フライアウトから機能にアクセスし、使用する機能をオンまたはオフにすることができます。

Windows Studio のエフェクト設定

(画像提供:Microsoft)

これらの設定は、 「設定」 > 「Bluetoothとデバイス」 > 「カメラ」からも操作できますリストからカメラを選択すると、「カメラエフェクト」設定に利用可能な機能が表示されます。

背景エフェクトには、標準とポートレートのぼかしがあります。アイコンタクトでは、目と目を繋いでカメラを見ているように見せることができます。標準モードとテレプロンプターモードを選択できます。

自動フレーミング機能は、人物が画面の中央に表示されるよう、視野をズームおよびトリミングします。ポートレートライト機能は、照明条件を調整し、暗い場所でも見やすさを向上させます。クリエイティブフィルターは、楽しいアニメーションやフレアを追加し、音声フォーカス機能は、ビデオ通話中の背景ノイズを除去します。

デバイスで利用できるエフェクトは、周辺機器と NPU の機能によって異なります。

ライブキャプション

ライブキャプションは、Windows 11 に以前から搭載されている機能の 1 つです。2024 アップデートのリリースにより、この機能は AI を活用し、ライブ翻訳も含まれるようになりました。

ライブキャプション翻訳

(画像提供:Microsoft)

ライブ翻訳は、Windows 11 上のあらゆるオーディオ ソースからの自動文字起こしと翻訳を通じて、誰でもオーディオを理解できるようにすることを目的としたアクセシビリティ機能です。たとえば、ライブ翻訳は YouTube ビデオや音声通話の翻訳にも機能します。

この機能は、Copilot+ PC でのみご利用いただけます。

音声の明瞭さ

Microsoft は、会話中や録音中に AI を使用してリアルタイムの背景ノイズを分析し、除去する新しい機能である Voice Clarity も追加しています。

この機能は自動的に動作するため、管理設定はありません。当初この機能はSurfaceデバイス専用でしたが、NPU非搭載の2024 Updateの一部として利用可能になります。 

この機能は NPU のないデバイスでも利用できるため、すべての AI 機能が既存のコンピューターのハードウェアを必要とするわけではないことがわかります。

自動スーパー解像度

これも待望の機能です。自動超解像度(Auto SR)は、デバイス上のAIを活用してゲームをアップスケールし、フレームレートと画質を向上させる機能です。

この機能は、NVIDIA DLSS Super Resolution、AMD FidelityFX Super Resolution、Intel XeSS と同様に動作しますが、Auto SR は開発者がゲームを更新しなくてもゲームを自動的にアップスケールします。

自動スーパー解像度の例

(画像提供:Microsoft)

この機能をオンにすると、Auto SRはアップスケール処理をGPU(グラフィック・プロセッシング・ユニット)ではなくNPU(ニューラル・プロセッシング・ユニット)に実行します。その結果、ゲーム体験が向上するだけでなく、エネルギー効率も向上します。

この設定は「グラフィックス」ページから利用でき、コンピューター全体で、またはアプリケーションごとにオンにすることができます。

ゲームを起動し、それが Auto SR と互換性がある場合、サポートが利用可能であることを知らせるトースト通知が表示され、設定アプリからオンにするオプションが表示されます。

MicrosoftはQualcommと共同で、ARM版Windows 11と互換性のあるゲームを一覧表示するウェブサイトも開設しました。このページでは、ゲームが自動超解像度にも対応しているかどうかも確認できます。ただし、発売時点では『ボーダーランズ3』、『Control (DX11)』、『ダークソウルIII』、『ゴッド・オブ・ウォー』、『キングダムカム・デリバランス』、『バイオハザード RE:2』、『バイオハザード3』、『SEKIRO SHADOWS DIE TWICE』、『Sniper Ghost Warrior Contracts 2』、『ウィッチャー3』など、10タイトル未満しかサポートされません。

自動スーパー解像度 (Auto SR) は、通常 Intel、AMD、Nvidia のアップスケーリング テクノロジを指すスーパー解像度 (SR) と同じではないことに注意することが重要です。

Auto SR 機能に関連して、Microsoft は Intel、AMD、Nvidia と連携して、新しい DirectSR も作成しました。これは、ゲーム開発者が各テクノロジを手動で統合するのではなく、既存のアップスケーリング AI テクノロジを単一の API セットに統合できるようにする新しいテクノロジです。

この機能は、Copilot+ PC でのみご利用いただけます。

写真の画像をリスタイルする

写真アプリに、デバイス上の AI を活用し、携帯電話で使い慣れたフィルターと同様に、さまざまな写真技法を使用して写真のスタイルを変更できる新しい「画像の再スタイル設定」機能が追加されました。

写真のスタイル変更

(画像提供:Microsoft)

テキスト プロンプトを使用して、背景や画像の他の部分をどのように変更するかを Photos に説明して指示することもできます。

さらに、Microsoftはペイントアプリの「Image Creator」をフォトアプリに導入し、AIを活用してテキストプロンプトを画像に変換します。この機能は、Copilot AIテクノロジーを活用し、クラウド上でOpenAI DALL-E言語モデルを用いて画像を作成します。

超解像度の写真

ソフトウェア大手は、フォトアプリに搭載される AI 機能の一環として、まもなくコンピューター上で AI を使用して画像を拡大できるようになると発表した。

同社によると、この機能はCopilot+ PCのNPUを使用して、画像を最大8倍に拡大・鮮明化します。さらに、超解像度機能により、低画質の画像を復元することも可能です。

マイクロソフトは、この機能により、画像の内容を損なうことなく、新たな詳細を加えて画像を修正できると説明している。

これらの機能は、今年後半に Copilot+ PC 専用として利用可能になります。

ペイントの共同制作者

「イメージ クリエーター」機能に加えて、ペイント アプリには、描画をスキャンしてアートワークの作成を支援する新しい機能「コクリエーター」が追加されます。 

ペイント共同制作者

(画像提供:Microsoft)

この機能をテキストプロンプトとともに使用し、スライダーオプションを使用して創造性の強度を調整できます。

この特定の機能は、拡散ベースのアルゴリズムを使用して、最小限の労力で高品質の画像を描画します。

この機能は、Copilot+ PC でのみご利用いただけます。

ジェネレーティブフィルと消去でペイントする

ペイント アプリを使用すると、「塗りつぶし」と「消去」という 2 つの新機能を利用できるようになります。これらの機能は AI のパワーを活用し、画像の編集と操作がこれまで以上に簡単になります。

Windows 11 Copilot+ の機能

ペイントにジェネレーティブな消しゴムと塗りつぶし機能が登場(画像提供:Microsoft)

「塗りつぶし」機能を使用すると、画像の一部を選択してテキストプロンプトを入力すると、AI が新しいコンテンツを生成し、指定された領域を塗りつぶします。

この機能は、当初、今年後半に Qualcomm プロセッサを搭載した Copilot+ PC 専用になります。

「消去」機能を使用すると、Android の Magic Eraser と同様に、画像の領域を選択して消去できます。

この機能は、コンピューターが通常の PC であるか Copilot+ PC であるかに関係なく、すべてのユーザーが利用できるようになる予定です。

コパイロットアプリ

Windows 11 2024 Update (およびバージョン 23H2) では、このソフトウェア大手は、右側からスライドするサイド パネルではなく、新しいアプリを使用して Copilot AI の統合を変更しています。

Windows 11 向けの新しいアプリ Copilot

(画像提供:マウロ・フクラク)

このアプリは、実際にはアプリフレームにラップされたチャットボットAIのCopilot.Microsoft.com版です。ChatGPTのWebインターフェースに似た新しいデザインが導入され、左側のパネルにはプロンプト履歴や、新しい会話の開始、プラグイン、ノートブックなどのオプションが表示されます。

ページ上部のオプションを使用して会話スタイルを変更することもできます。 

これらの変更の結果、Copilot を使用して設定を変更することはできなくなり、「Copilot」ボタンはシステム トレイに表示されなくなり、Microsoft は設定アプリから「Copilot」設定も削除しています。

同社はまた、テキスト、画像、音声、ビデオを入出力として処理できる OpenAI GPT-4o で Copilot インテリジェンスを更新する予定です。

Copilot は応答の分析と処理にクラウドを利用するため、Copilot+ PC 専用ではなく、誰でも利用できる機能です。

副操縦士の提案

Copilot アプリはシステム設定の変更に使用できなくなりましたが、Microsoft は「Copilot の提案」も導入しています。

Copilotの提案は、チャットボットAIが役立つと判断した場合、アプリケーション上に表示されます。例えば、設定アプリでは、問題の解決や機能の有効化などに関する提案がページ上部に表示されることがあります。

ファイルエクスプローラーで画像にマウスオーバーすると、Copilot プロンプトインターフェースが表示されます。このプロンプトを使用して画像に関する質問をしたり、背景の削除、別の画像の作成、画像のサイズ変更などの操作を実行したりできます。

電子メールを受信すると、ドキュメントの添付ファイルを要約する提案などを含むトースト通知が表示されることがあります。

重要: Microsoft は Windows 11 バージョン 23H2 および 24H2 に新機能と改善を段階的に展開しているため、2024 Update のリリース初日にすべての変更が利用できるようになるわけではありません。また、バージョン 24H2 向けの改善の一部は、最終的にバージョン 23H2 に移植されます。同社は、最初にバージョン 23H2 で利用可能になり、その後バージョン 24H2 に移植される変更にも取り組んでいます。また、機能更新は 2024 年 6 月 18 日にCopilot+ PC向けに部分的に利用可能になりましたが、 Windows Recallを除いて、対象としている機能の一部のみが提供されており、追って通知があるまで延期されていることも注目に値します。10 月には、機能更新は既存のデバイス向けにさらに広範囲に利用可能になります。最後に、AI 機能には新しいハードウェア (NPU など) が必要になる場合があります。

その他のリソース

Windows 10 および Windows 11 に関する役立つ記事、情報、よくある質問への回答については、次のリソースをご覧ください。 

  • Windows CentralのWindows 11 — 知っておくべきことすべて
  • Windows Central の Windows 10 — 知っておくべきことすべて

Mauro Huculakは、WindowsCentral.comのWindows How-To Expertとして10年近く寄稿しており、ITおよびテクニカルライティングの分野で合計22年以上の経験を有しています。Microsoft、Cisco、VMware、CompTIAなどから様々な専門資格を取得しており、長年にわたりMicrosoft MVPとして認められています。