Googleは昨日、Gemini 2.0 FlashモデルやDeep Researchなどを含む多数のアップデートを発表した。さらに、検索大手は、Project Mariner、Project Astra、Jules などの今後の AI エージェントをプレビューしました。 Googleは、Project Astraを改善しており、その機能はGeminiアプリに統合されると述べた。
それに伴い、Google は Project Astra と非常によく似た機能を備えた「Stream Realtime」を Google AI Studio 上で静かにリリースしました。この機能は開発者がAPIをテストするためのものですが、一般ユーザーも無料で簡単に利用できます。カメラを使用して周囲を表示し、リアルタイムで Gemini 2.0 と会話することができます。最も優れている点は、ラップトップ画面を共有し、リアルタイム音声を使用して対話できることです。
遅延が大幅に短縮され、まさにリアルタイムで Gemini 2.0 と会話しているように感じられます。スマートフォンのカメラまたはラップトップのウェブカメラを使用して、あなたが見ているものをGeminiに見せることができます。ラップトップで画面を共有することもできます。 Google AI Studio を使用して Project Astra などの早期プレビューを試す方法は次のとおりです。
- さあ、起動してください aistudio.google.com/live モバイルまたはラップトップ/デスクトップのブラウザで。
- 次に、Google アカウントでサインインします。 Google AI Studio は誰でも無料でご利用いただけます。
- その後、「Show Gemini」をタップまたはクリックし、ライブカメラとマイクの使用を許可します。
- これで、周囲の環境を表示したり、リアルタイムで Gemini 2.0 と会話したりできるようになります。スマートフォンを使用してテストしたところ、Raspberry Pi ボードがリアルタイムで正しく識別されました。
- 次に、ラップトップで Gemini 2.0 と画面を共有しましたが、非常にうまく機能しました。ノートパソコンを探しているときに私の画面を分析し、いくつかの提案をしてくれました。本当にすごいですね。
リアルタイムのコーディング支援には、画面共有機能が便利です。 ChatGPT はすでに macOS 上で画面を表示できますが、それは選ばれたいくつかのコーディング アプリに限定されています。 OpenAIは以前、ライブカメラがChatGPTに導入されることを発表しましたが、これまでのところ正式なアップデートはありません。おそらく、現在進行中の「12日間のOpenAI」の発表の中で、同社はChatGPTでライブカメラを開始するかもしれません。
ちなみに、MicrosoftはWebを閲覧しているときに画面を表示できるCopilot Visionもテストしているが、これもまた少数の承認されたWebサイトに限定されており、早期アクセスユーザーのみが利用できる。
Stream Realtime により、Google は Project Astra に非常に近いものを紹介しています。もちろん、改良された Project Astra では、リアルタイムの Google マップ、Google レンズ、Google 検索データを利用して、さらにシームレスなエクスペリエンスを実現できますが、まだ利用できません。ライブ Web アクセスがなくても、Stream Realtime は素晴らしい Project Astra デモになると思います。 Stream Realtime を知っている人は、舞台裏で Project Astra をしているかもしれません。
私たちの活動を応援してください ❤️
この記事を気に入っていただけたら、今後も質の高いコンテンツを発信し続けられるようチップのご支援をご検討ください。
