最近Microsoft社が提供しているAIチャットはBingAIやBing Chatなどとも呼ばれていましたが、名称が「Copilot」に統合されました。そんな中、GPT-4エンジンがGPT-4 Turboに！画像生成AIのDALL-E3が更に進化！これが2024年にやってきます！
2023年に入りChat-GPTなどのチャット型人工知能AIが話題となりMicrosoft社ではGPT-4の人工知能エンジンを搭載したBing Chatの導入から始まり、Microsoft 365、Edge、Windowsへの組み込みが行われ一般的にも身近に感じる機会が増えてきましたね！
そんな中でMicorosoft社が2024年に向けてCopilotの今後の計画について発表があり、その内容が非常にワクワクさせられたのでポイントを絞ってご紹介します。
2024年1月15日にはCPT-4やGPT-4 Turboエンジンを優先的に利用できるCopilot Proが提供されました！(詳しくは↓の記事)
Copilot Proが提供開始！使い方は？無料との違いは(比較表)？購入すべき？
Copilot(Bing Chat)の2024年公開の機能5点がヤバい
| 機能名 | 概要 |
|---|---|
| GPT-4 Turbo | OpenAIの最新モデルを使って、より複雑で長いタスクに対応できるようになる。 |
| DALL-E 3 | 画像生成の品質と精度を向上させる現状より更に新しいモデル。 |
| Multi-Modal with Search Grounding | GPT-4とビジョンを組み合わせて、Bing画像検索やウェブ検索のデータを利用して、画像理解を強化する。 |
| Code Interpreter | 複雑なタスクを実行できるようにする新しい機能。計算、コーディング、データ分析、可視化、数学などが可能になる。 |
| Video understanding and Q&A | Edgeで動画を見ながら、動画の要約や質問に答えることができるようになる。 |
これはMcirosoft社が提供しているCopilotの2024年に公開予定の最新機能です。例えば現在のCopilotの人工知能モデルはOpenAIが開発したGPT4(Chat-GPTでは有料モデル)が更にモデルUP！
画像生成AIは最新モデルのDALL-E3が更にアップデート予定！
現在Edgeやブラウザで利用可能なCopilot(Bing Chat)ですがWindowsのデスクトップでも呼び出すことができるため非常に便利！
それでは一つ一つもう少し詳しく見ていきましょう！
【GPT-4 Turbo 】Copilotの2024年に向けて今後の進化
REUTERS/Dado Ruvic/Illustration/File Photo
GPT-4 Turboとは：GPT-4 Turboは、OpenAIが開発したGPT-4の高速化バージョンです。GPT-4 Turboは、GPT-4よりも10倍高速に実行できるため、より多くのデータで学習したり、より複雑なタスクを実行したりすることができます。
更に今までのGPT-4と大きく異なる点として学習データが2021年9月までと限定されていましたが、GPT-4 Turboの学習データは2023年4月までと拡張されたことも注目です！
【DALL-E3】Copilotの2024年に向けて今後の進化
左が現行モデルで右が進化後のモデルです。人物の造形がより詳細となり周りの背景もより複雑な絵となっていることがお分かりでしょうか。
新しいDALL-E 3モデルの導入により、Copilotを使って、より高品質で、プロンプトに対する精度が向上した画像を生成することが可能になりました。これらの機能は、bing.com/createにアクセスするか、Copilotに画像作成を指示することで利用できます。
検索グラウンディングによるマルチモーダル
Copilot の継続的な AI イノベーション
GPT-4のパワーとビジョンをBingの画像検索やウェブ検索のデータと組み合わせることで、クエリに対する画像理解が向上します。この新機能は近日中に利用可能になる予定です。
Prometheusがマルチモーダル用にどのように更新されたかを確認することができます。
以下の例からもわかるように、その結果は非常に印象的です。従来のマルチモーダルシステムでは、画像に写っているものを一般的な方法で記述することができますが、サーチグラウンディングにより、具体的なシャトルと打ち上げ日を特定することができます。
コードインタプリタ
新たな機能を開発しており、これによりより正確な計算、コーディング、データ分析、視覚化、数学などの複雑なタスクを実行できるようになります。これらの機能については、一部のユーザーからフィードバックを収集し、近日中に広く利用可能にする予定です。
Copilotは、複雑な自然言語のリクエストに対応するコードを生成し、そのコードを安全なサンドボックス環境で実行し、その結果を使用して高品質の応答を提供します。また、ユーザーはCopilotとの間でファイルをアップロードおよびダウンロードできるため、自分のデータやコード、およびBingの検索結果を操作できます。
Copilotの強力なPython環境は、Azure Container Apps上のセキュリティで保護されたサンドボックス環境で実行されます。pandas、numpy、matplotlib、sklearn、flaskなどのデータサイエンス用の一般的なツールとライブラリがプリロードされた高速でユーザー分離された環境を提供します。CopilotがBing検索やWebからアクセスできるデータを、ファイルにアップロードされたデータと組み合わせることで、深く関連性の高い分析情報や、美しくインタラクティブな出力を得ることができます。
ビデオの理解と Q&A – Edge の Copilot
Edgeで視聴中のビデオについて、Copilotに要約や質問を依頼することが可能になりました。例えば、講演のYouTubeビデオを見ている場合、Copilotに要約を依頼することができます。
Webページの要約だけでなく動画の要約や内容に関するQAにも対応する未来がもうすぐ来ているのはワクワクしませんか？
CopilotのDeep Searchとは？2024年の今後の進化とは
Copilotの今後の進化について触れてきましたが、更に「Deep Search」とう機能も検索エンジンのBingに反映される予定とのことです。(詳しくは前述リンク参照)
ディープサーチは、Bingの既存のWebインデックスとランキングシステムに基づいて構築され、GPT-4でそれらを強化します。GPT-4は、あらゆる入力から自然言語のテキストを作成できる最先端のジェネレーティブAI LLM（Large Language Model）です。ディープサーチの場合、GPT-4は検索クエリを、理想的な結果セットに含まれるべきものをより包括的に記述したものに拡張します。
例えば、各国のポイントプログラムについて調べていて、「日本ではポイント制度はどうなっているのか」と検索したとします。ディープ検索では、次のようなより包括的な説明が生成される場合があります。
日本におけるさまざまなポイントカードプログラムの仕組みについて、それぞれの利点、要件、制限など、説明してください。コンビニエンスストア、スーパーマーケット、レストランなど、さまざまなカテゴリの人気のあるポイントカードの例を含めます。ポイントカードと日本の他の決済方法との違いを、現在の特典や特典も含めて紹介します。最も人気のあるサービスと参加している加盟店を強調します。
この拡張された説明は、いくつかのキーワードよりも正確かつ明確に私の意図と期待を捉えています。また、Bing が探している情報の種類を理解するのにも役立ちます。
一部のクエリはあいまいです。例えば、「日本のポイント制度はどうなっているのか」というのは、私が意図したように、ポイントのリワードを指している可能性がありますが、移民政策などに関する情報を求めている可能性もあります。拡張された説明は、これらの解釈の 4 つに適しているかもしれませんが、すべての解釈に適しているわけではありません。その場合、ディープサーチはGPT-<>を活用して考えられるすべてのインテントを見つけ、それぞれの包括的な説明を計算します。Deep Search には、これらすべてのインテントが表される曖昧さ回避ペインが用意されています。私の研究意図が誤解された場合は、曖昧さ回避ペインから適切なものを選択すると、対応する包括的な説明が代わりに使用されます。
コメント