マルチモーダルAI：見て聞くことができる人工知能

Multimodal AI Artificial Intelligence that can see and hear

人工知能（AI）はその創始以来、長い道のりを歩んできましたが、最近まで、その能力はテキストベースのコミュニケーションと限られた世界知識に制限されていました。しかし、マルチモーダルAIの導入により、AIがこれまで以上に「見る」ことや「聴く」ことができるようになり、エキサイティングな新しい可能性が開かれました。最近、OpenAIはGPT-4チャットボットをマルチモーダルAIとして発表しました。マルチモーダルAI周りで何が起こっているか、そして彼らがゲームを変えているかを探ってみましょう。

また読む：DataHour：マルチモーダル機械学習の紹介

チャットボットvs.マルチモーダルAI：パラダイムシフト

従来、AIに対する私たちの理解は、人間のユーザーと会話を模擬するコンピュータプログラムであるチャットボットによって形作られてきました。チャットボットには利用価値がありますが、AIがテキストを介してのみコミュニケーションできるものと考えるようになり、AIができることに対する私たちの認識を制限していました。しかし、マルチモーダルAIの出現により、それらの認識が変わっています。マルチモーダルAIは、画像や音声などのさまざまな入力を処理できるため、従来のチャットボットよりも柔軟性と強力さがあります。

また読む：Metaがテキスト、画像、音声を同時にトレーニングしたAIモデルをオープンソース化

• ウィンブルドンがAIによる実況を導入
• あなたの次の夢の役割(2023年)を見つけるのに役立つ、最高のAIツール15選
• Googleは、2,000万ドルの寄付を行い、サイバーセキュリティクリニックの創設を支援します

マルチモーダルAIの実行

OpenAIは最近、最も高度なAIのGPT-4をマルチモーダルAIとして発表しました。これは、画像、音声、およびその他のデータの処理と理解ができることを意味し、以前のGPTのバージョンよりもはるかに能力が向上しました。

詳細はこちら：Open AI GPT-4 is here | Walkthrough & Hands-on | ChatGPT | Generative AI

この技術の最初のアプリケーションの1つは、靴のデザインを作成することでした。ユーザーはAIをファッションデザイナーとしてプロンプトし、最新のトレンドに合った靴のアイデアを開発するように促しました。AIはビングイメージクリエーターをプロンプトして、デザインの画像を作成し、それを批評して磨きをかけ、最終的に「誇りに思える」計画を考え出しました。このプロセス全体は、プロンプトから最終デザインまで、完全にAIによって作成されました。

また読む：Metaが画像に対する「人間のような」デザイナーAIを発表

マルチモーダルAIの別の例は、モバイル電話のChatGPTアプリの一部である音声からテキストへのシステムであるWhisperです。 Whisperは、従来の音声認識システムよりもはるかに正確で、アクセントや速い話し言葉を簡単に処理できます。これは、インテリジェントアシスタントやプレゼンテーションでのリアルタイムフィードバックを作成するための優れたツールです。

マルチモーダルAIの影響

マルチモーダルAIは、現実世界に対して非常に大きな影響を与え、AIが新しい方法で私たちと関わることを可能にします。たとえば、AIアシスタントは私たちのニーズを予測し、回答をカスタマイズすることで、より有用になることができます。 AIは、口頭の教育プレゼンテーションにリアルタイムのフィードバックを提供し、学生に即時の批評を与え、リアルタイムでスキルを向上させることができます。

また読む：もうカンニングは終わり！ Sapia.aiがリアルタイムでAI生成された回答をキャッチ！

ただし、マルチモーダルAIにはいくつかの課題もあります。 AIが私たちの日常生活により統合されるにつれて、その能力と制限を知る必要があります。 AIはまだ幻覚やミスを起こしやすく、AIを敏感な状況で使用する際のプライバシーやセキュリティに関する懸念があります。

私たちの意見

マルチモーダルAIは、これまで以上に「見る」ことや「聴く」ことができるようになり、ゲームチェンジャーとなりました。この新しい技術により、AIは全く新しい方法で私たちと関わることができ、インテリジェントアシスタント、リアルタイムのプレゼンテーションフィードバックなどの可能性が開かれました。ただし、この新しい技術の利点と課題の両方に注意し、AIが倫理的かつ責任を持って使用されるように努める必要があります。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!