分享

2024 年 12 月 11 日

使用 Gemini 2.0 Flash 重新打造 Rooms 互動式虛擬人物的 3D 空間

Vishal Dharmadhikari

產品解決方案工程師

Jason Toff

Rooms

房間展示主圖

Rooms 是創新平台,使用者可在上面創作、遊玩及分享互動式 3D 空間和遊戲,而 Gemini API 的推出將為這個平台帶來重大進展。Gemini 2.0 Flash 目前僅提供實驗預先發布版,但我們已整合其進階文字和新音訊輸出功能,讓 Rooms 在沉浸式 3D 環境中,發揮更豐富的使用者互動和創意。

深入瞭解 Rooms:使用 Gemini 2.0 Flash 打造 3D 互動的未來

蜂巢式檢視畫面中的多個房間圖示

使用者可透過聊天室建立及探索使用者產生的 3D 體驗,就像是數位版樂高積木。Rooms 可在網頁和行動裝置上使用,提供直覺性的建構工具和社群功能,有助於培養創意並促進互動。成千上萬的使用者已在這個充滿活力的數位世界中創作、分享及玩樂。

「我深信,創意表達不僅是一種享受,更是人類的深層需求。」Rooms 創辦人兼執行長 Jason Toff 表示。「網路正在演進,變得更豐富、更身歷其境,因此需要 3D 物件。這些物件的建立作業將會民主化,任何人都能建構及分享自己的創作。3D 物件將變得栩栩如生且可互動,進一步模糊數位世界和實體世界的界線,而生成式 AI 正是這項演進過程中的重要一環。」

現在,Rooms 已使用 Gemini 2.0 Flash 製作原型,開啟了虛擬人物互動的新紀元,將靜態虛擬人物轉變為能進行豐富自然對話的動態角色:

  • 動態對話:Gemini 2.0 Flash 的新音訊輸出功能,可讓虛擬人物之間的對話更流暢、更具吸引力。想像一下,虛擬人物回應使用者提示時,不只會以文字回應,還會即時產生生動逼真的語音。

  • AI 技術輔助的人物角色:除了提供生動對話,Rooms 也運用 Gemini 2.0 Flash,為每個虛擬人物賦予獨特的個性特徵、背景故事,甚至是動機。透過 Gemini 2.0 Flash 提供豐富的角色設定檔和背景資訊,Rooms 就能產生虛擬人物,以多樣化且引人入勝的方式進行互動。這為角色扮演、協作說故事和即興遊戲等活動開啟了令人興奮的可能性。

使用 Gemini 2.0 Flash 提升房間體驗

整合 Gemini 2.0 Flash 後,Rooms 將在幾個重要方面有所轉變:

  • 更深層的沉浸體驗:更逼真且反應靈敏的虛擬人物互動,可在 3D 世界中營造更深層的臨場感和沉浸體驗。

  • 更豐富的互動: 透過即時對話和 AI 技術輔助的個性化功能,讓使用者之間建立更具吸引力且有意義的社交連結。

  • 無限創意:使用者可以打造更豐富的故事情節和體驗,讓遊戲與社交互動之間的界線變得模糊。

  • 互動式學習機會:使用者可以與 AI 輔助的歷史人物、科學家或文學人物進行互動式對話,以全新方式學習。

「我們非常期待 Gemini 2.0 提升聊天室體驗的潛力。在 3D 空間中進行動態的 AI 對話和互動,將會徹底改變遊戲規則。這項功能將為使用者帶來全新的沉浸式體驗、創意和連結,我們迫不及待看到他們的創作成果。」

— Rooms 執行長 Jason Toff

未來藍圖和願景

Rooms 致力於突破 3D 互動的極限,並強調負責任的 AI 開發。他們認為,AI 技術將與使用者的創意完美結合,在不斷擴張的 3D 空間中,打造充滿活力的社群和無限的自我表達方式。

Jason 接著說:「我們認為,AI 將成為 3D 體驗中不可或缺的隱形力量,提升創意、沉浸式體驗和社交連結。想像一下,由 AI 技術輔助的角色可以安全地進行有意義的對話、適應使用者行為,甚至與使用者共同創作。這將為新形式的故事敘述、遊戲體驗和虛擬互動開啟無限可能性,但這些互動必須安全且包容。我們致力於在 Rooms 中提供負責任的 AI 技術。」

透過 Gemini API,Rooms 證明進階 AI 技術可與其他功能完美整合,打造真正吸引人且使用者友善的 3D 體驗。他們不只是建構平台,而是展示 AI 的力量,改變我們在數位世界中互動、創作和連結的方式。探索 Gemini API 並發掘其潛力。