分享

2024 年 12 月 11 日

Rooms 使用 Gemini 2.0 Flash 重新構想 3D 空間,並加入互動式人物

Vishal Dharmadhikari

產品解決方案工程師

Jason Toff

Rooms

房間展示主圖

Rooms 是創新平台,使用者可在上面創作、遊玩及分享互動式 3D 空間和遊戲,現在透過 Gemini API 更上一層樓。Gemini 2.0 Flash 目前僅提供實驗預先發布版,但我們已整合這款模型的進階文字和新音訊輸出功能,讓 Rooms 在沉浸式 3D 環境中,提供更豐富的使用者互動和創意體驗。

深入瞭解 Rooms:運用 Gemini 2.0 Flash 打造 3D 互動的未來

蜂巢式檢視畫面中的多個房間圖示

聊天室可讓使用者建構及探索使用者產生的 3D 體驗,就像數位版樂高積木一樣。Rooms 可在網頁和行動裝置上使用,提供直覺性的建構工具和社交功能,有助於激發創意和建立連結。成千上萬的使用者已在這個充滿活力的數位世界中創作、分享及玩樂。

「我深信,創意表達不僅是一種享受,更是人類的深層需求。」Rooms 創辦人兼執行長 Jason Toff 表示。「網路正在演進,變得更豐富、更身歷其境,因此需要 3D 物件。這些物件的建立作業將會民主化,任何人都能建構及分享自己的創作。3D 物件將變得栩栩如生,並能與使用者互動,進一步模糊數位世界和實體世界的界線,而生成式 AI 正是這項演進過程中的重要一環。」

現在,Rooms 已透過 Gemini 2.0 Flash 製作原型,開啟了虛擬人物互動的全新時代,將靜態虛擬人物轉變為可進行豐富自然對話的動態角色:

  • 動態對話:Gemini 2.0 Flash 的新音訊輸出功能,可讓虛擬人物之間的對話更流暢、更吸引人。想像一下,虛擬人物回應使用者提示時,不只會以文字回應,還會即時產生生動逼真的語音。

  • AI 技術輔助的人物角色:除了提供生動對話,Rooms 也使用 Gemini 2.0 Flash,為每個虛擬人物賦予獨特的個性特徵、背景故事,甚至是動機。透過 Gemini 2.0 Flash 提供豐富的角色設定檔和情境資訊,Rooms 就能產生可以以多種方式互動且引人入勝的顯示圖像。這為角色扮演、協作說故事和即興遊戲等功能開啟了令人興奮的可能性。

使用 Gemini 2.0 Flash 提升房間體驗

整合 Gemini 2.0 Flash 後,Rooms 將在幾個重要方面有所轉變:

  • 更深層的沉浸體驗:更逼真且反應靈敏的虛擬人物互動,可在 3D 世界中營造更深層的臨場感和沉浸體驗。

  • 更豐富的互動: 透過即時對話和 AI 輔助的個性化功能,讓使用者之間建立更具吸引力且有意義的社交連結。

  • 無限創意:使用者可以打造更豐富的故事情節和體驗,讓遊戲與社交互動之間的界線變得模糊。

  • 互動式學習機會:使用者可以與 AI 輔助的歷史人物、科學家或文學人物進行互動式對話,以全新方式學習。

「我們非常期待 Gemini 2.0 的潛力,希望能為聊天室帶來更優質的體驗。在 3D 空間中進行動態的 AI 對話和互動,將會徹底改變遊戲規則。這項功能將為使用者帶來全新的沉浸式體驗、創意和連結,我們迫不及待看到他們的創作成果。」

— Rooms 執行長 Jason Toff

未來藍圖和願景

Rooms 致力於突破 3D 互動的極限,並強調負責任的 AI 開發。他們認為,AI 技術將與使用者的創意完美結合,在不斷擴大的 3D 空間中,培養充滿活力的社群,並讓使用者盡情展現自我。

Jason 接著說:「我們認為,AI 將成為 3D 體驗中不可或缺的隱形力量,提升創意、沉浸式體驗和社交連結。想像一下,AI 角色可以安全地進行有意義的對話、適應使用者行為,甚至與使用者共同創作。這將為新形式的故事敘述、遊戲體驗和虛擬互動開啟無限可能性,但這些互動必須安全且包容。我們致力於在 Rooms 中提供負責任的 AI 技術。」

透過 Gemini API,Rooms 證明進階 AI 技術可與其他功能完美整合,打造真正吸引人且使用者友善的 3D 體驗。他們不只是建構平台,而是展示 AI 的力量,改變我們在數位世界中互動、創作和連結的方式。探索 Gemini API 並發掘其潛力。