AIチャンピオンが「真実よりも記憶」で優れていることから、研究者はMicrosoft CopilotとChatGPTの賢さに疑問を呈しています…

知っておくべきこと

• AI は、新しい複雑なタスクを処理する場合と比べて、日常的なタスクを処理する場合に優れた結果とパフォーマンスを発揮します。
• MITの研究者は、AIツールは推論よりも記憶に大きく依存しており、それが新しいタスクを処理する際のパフォーマンスに悪影響を及ぼしていると主張している。
• AI が生成した出力には、人間の介入が依然として重要です。

世界中で急速に成長し、普及している生成型AIは、セキュリティやプライバシーを含む様々な懸念を引き起こしています。最近の報告によると、AIは人間よりも賢くなり、私たちの仕事を奪う（仕事が趣味になる可能性もある）可能性があるとされており、専門家は職場におけるAIの関連性について懸念を抱いています。

確かに、ChatGPTやMicrosoft CopilotのようなAIチャットボットは、幻覚を見る段階から、数秒以内にコードを記述しエラーを特定する段階まで、大きな進歩を遂げてきました。NVIDIAのCEOであるジェンスン・フアン氏でさえ、AIの普及により、プログラミングはキャリアの選択肢として行き詰まっている可能性があると述べています。 

この問題は依然として議論の余地がありますが、AIツールはますます高度化・洗練化しており、一部の職業は時代遅れになりつつあります。例えば、建築家やインテリアデザイナーは、DesignerやChatGPTのImage Creatorによって職を奪われる可能性があります。これらのツールは、高度で詳細な構造設計を数秒で生成できるからです。しかし、これらのツールは、白無地の画像を作成するといった単純なタスクの処理に苦戦している様子が見受けられます。

MITコンピュータ科学・人工知能研究所（CSAIL）による新たな研究によると、法学修士（LLM）は慣れ親しんだタスクでは優れたパフォーマンスを発揮する傾向がある（Digital Watch Observatory）。一方、AIツールは新しいタスクで優れた成果を上げるのに苦労している。この研究は、この前提に基づき、AIツールの推論能力と、パフォーマンス向上のための記憶への過度な依存度を比較評価している。

この理論を裏付けるため、研究者はLLMの一般的なタスクと、訓練されていない新しいタスクの処理時のパフォーマンスを比較しました。研究者の調査結果によると、OpenAIのGPT-4のような高度なツールは10進法の算術では優れた成績を収めましたが、他の基数では苦戦しました。研究者たちは、チェスや空間推論など、様々なタスクにおけるLLMの能力を検証するために、同じ分析テストを使用しました。 

研究者たちは、これらのタスクにおけるLLMのパフォーマンスを「未知の設定でのランダムな推測」と比較しました。この結果は、AIは十分に訓練され、慣れ親しんだタスクでは優れた成績を収めることが多いことを示唆しています。これらのタスクは記憶に頼るものです。しかし、人間が得意とする新しい課題で実際の推論が必要となると、AIは失敗します。

AIが正しく機能するには人間の介入が必要

AIは日々進歩しており、人間の介入をほとんど必要とせずに様々なタスクを処理できるようになっていることが明らかになっています。ある報告書によると、銀行業務の54%はAIによって自動化できるとされています。しかし、プライバシーとセキュリティの問題が技術の進歩を阻んでいる現状では、これは実現可能なのでしょうか？

AIの普及によって最も大きな影響を受けているのは、ジャーナリズム業界と言えるでしょう。以前のレポートでは、ある出版社がコスト削減のため、スタッフの大半を解雇し、AIを活用して業務を自動化した事例を取り上げました。その結果、編集者はAIの誤字脱字の修正に多くの時間を費やし、過重労働に陥りました。出版社は新たなライターを雇わざるを得なくなったものの、執筆活動は行えませんでした。新入社員たちは、低賃金でAIによる文法や事実誤認の修正を強いられました。

ゲーム開発者たちは、AIによって職を奪われるのではないかと懸念を表明しています。ゲームスタジオは、開発者が創造性を発揮する時間を十分に確保できるよう、反復的で冗長な作業を自動化できる開発ツールを検討していると報じられています。一見すると良い話に聞こえますが、開発者たちは、AIの登場によって仕事内容が全く変わってしまう可能性があると主張しています。 

さらに、ゲーム開発にAIを統合することは、開発者にとってより屈辱的な作業を意味する可能性があります。開発者は、ゲームプレイを向上させるために創造力を最大限に発揮する代わりに、AIの使用中に生じたミスの修正に時間を費やす可能性があります。

ケビン・オケムワは、ケニアのナイロビを拠点とするベテランのテクノロジージャーナリストです。Windows Centralで業界の最新トレンドや動向を幅広く取材し、豊富な経験を有しています。イノベーションへの情熱と細部への鋭い洞察力を持つ彼は、OnMSFT、MakeUseOf、Windows Reportといった主要メディアに寄稿し、Microsoftエコシステムを取り巻くあらゆるトピックについて、洞察力に富んだ分析と最新ニュースを提供しています。常に変化するテクノロジーのトレンドを追っている暇な時は、世界を旅したり、音楽を聴いたりしています。