OpenAIは、ChatGPTのモバイル版「Advanced Voice Mode」において、画面共有とビデオ会話機能を正式に導入しました。
この新機能により、ユーザーはリアルタイムでの視覚的な文脈を共有できるようになり、対話の幅がさらに広がります。
画面共有機能では、スマートフォンの画面を直接ChatGPTに見せることができるため、たとえば、メッセージの返信を相談したり、
特定のアプリの使い方を尋ねたりと、視覚的なサポートを得ることが可能です。
また、ビデオ会話機能を使えば、ChatGPTとリアルタイムで音声と映像を通じて交流できます。
これにより、会話がより自然で親しみやすくなるだけでなく、対話の中で具体的な手順を視覚的に確認することもできます。
今回のデモでは、ユーザーが「コーヒーの淹れ方を教えて」とビデオで質問すると、ChatGPTは「まず、ドリッパーにフィルターをセットして、お湯で湿らせます」と具体的な指示を与えながら、画面に表示された映像をもとにリアルタイムでアドバイスしていました。
Now you can chat with ChatGPT over video and voice in real time. pic.twitter.com/6LySLJcFy5
— OpenAI (@OpenAI) December 12, 2024
また、「このメッセージの返信を手伝ってほしい」と画面共有を使って依頼すれば、ChatGPTが「こんにちは、ケビン。サンタの衣装、とても素敵ですね。ただ、もう少し練習が必要かもしれません」といった提案をしてくれています。
Screenshare while using Advanced Voice for instant feedback on whatever you’re looking at. pic.twitter.com/d4Xm36dwOX
— OpenAI (@OpenAI) December 12, 2024
このアップデートは、すでに提供されている音声対話機能を強化するものです。
Advanced Voice Modeでは、ChatGPTが直接音声を認識し、50以上の言語に対応することで、自然な会話のペースと感情豊かな表現を実現しています。
さらに、この新機能により、視覚的な要素を組み合わせた対話の幅広い活用が期待されています。
OpenAIは、Team、Plus、Proユーザー向けに、これらの機能を本日より順次展開しています。
欧州のPlusおよびProユーザーにも近日中に利用可能となる予定です。
また、この機能の発表を記念して、利用者には音声対話の利用制限を一度リセットする特典が提供されます。
出典:Santa Mode & Video in Advanced Voice—12 Days of OpenAI: Day 6 – YouTube