Cartwheel fa avanzare l'animazione dei personaggi utilizzando l'API Gemini

Cartwheel è all'avanguardia nell'animazione di nuova generazione e offre una piattaforma in cui gli input in linguaggio naturale (ad es. "salta", "giro di ballo di salsa") azioni dirette del personaggio. Questa innovazione migliora il modo in cui i creator creano animazioni per video, giochi, pubblicità e social media. Cartwheel integra Imagen 3 per una progettazione intuitiva di testo in personaggio e sfrutta l'anteprima di Gemini 2.5 Pro per sviluppare algoritmi sofisticati specifici per l'animazione, esplorare codebase complessi e accelerare l'ottimizzazione della piattaforma, consentendo agli utenti di espandere la propria narrazione creativa.

Lo sviluppo di una piattaforma di animazione all'avanguardia richiede non solo strumenti di progettazione intuitivi, ma anche un'innovazione continua negli algoritmi di backend e una gestione efficiente del codebase. Cartwheel ha dovuto affrontare la sfida di prototipare e implementare rapidamente funzionalità di animazione complesse, ottimizzare la sua vasta base di codice per le prestazioni e consentire agli sviluppatori di comprendere e contribuire rapidamente a un sistema su larga scala. Avevano bisogno di un partner di AI potente per potenziare i loro sforzi di sviluppo.

Cartwheel utilizza l'API Gemini per migliorare la pipeline di creazione rivolta agli utenti e per assistere i processi di sviluppo interni.

• Ideazione di personaggi basata sull'AI con Imagen 3:Cartwheel integra le funzionalità di conversione da testo a immagine di Imagen 3, consentendo ai creator di utilizzare prompt di testo per ideare e generare immagini uniche di personaggi direttamente all'interno della piattaforma. Questi personaggi progettati su misura possono essere animati utilizzando il linguaggio naturale, quindi esportati completamente attrezzati e pronti per software di editing 3D standard del settore come Maya o Blender, consentendo l'integrazione in ambienti di produzione professionali.
• Assistenza a R&S e ottimizzazione con l'anteprima di Gemini 2.5 Pro: il team di Cartwheel utilizza internamente l'anteprima di Gemini 2.5 Pro per supportare i propri flussi di lavoro di ingegneria e ricerca:
  • Sviluppo di algoritmi: l'anteprima di Gemini 2.5 Pro viene utilizzata per sviluppare funzionalità specifiche per l'animazione, tra cui algoritmi per la sfocatura del movimento per la sintesi dei dati, piramidi laplaciane per la fusione e IK (cinematica inversa) automatica per la posa nell'editor.
  • Esplorazione e debug del codice: il team utilizza l'anteprima di Gemini 2.5 Pro per esplorare codebase complesse, generare idee per nuovi esperimenti e contribuire al debug efficiente di casi limite, come errori complessi di rotazione della videocamera.
  • Utilizzo del contesto lungo per le operazioni sul codebase: le funzionalità di contesto lungo di Gemini 2.5 Pro Preview vengono utilizzate per operare sull'intero codebase di Cartwheel. In questo modo, gli sviluppatori possono, ad esempio, inserire nuovi codebase (come il frontend) nel contesto per aggiungere funzionalità o porre domande di alto livello sull'architettura e sulla funzionalità del sistema.

Utilizzando l'anteprima di Gemini 2.5 Pro per assistere nello sviluppo di algoritmi, nell'esplorazione del codice e nel debug, Cartwheel mira a migliorare i propri processi di sviluppo e ad accelerare l'ottimizzazione della piattaforma. L'integrazione di Imagen 3 offre agli utenti un modo semplice per generare immagini di personaggi a partire dal testo, mentre l'anteprima di Gemini 2.5 Pro funge da strumento per aiutare gli sviluppatori a creare la tecnologia sottostante. Queste integrazioni supportano gli obiettivi di Cartwheel di rendere i flussi di lavoro di animazione più veloci e accessibili, consentendo utilizzi come:

• Accelerare la creazione di asset per giochi e video, consentendo ai team di concentrarsi sulla progettazione di base.
• Facilitare la generazione efficiente di contenuti di marketing e per i social media.

L'integrazione di Imagen 3 e Gemini 2.5 Pro Preview in Cartwheel evidenzia come Google AI possa essere applicata per abilitare nuove funzionalità rivolte agli utenti e assistere il complesso lavoro di sviluppo necessario per creare strumenti di nuova generazione.

Esplora la documentazione dell'API Gemini, scopri di più su Imagen 3 e inizia a utilizzare Google AI Studio.

Cartwheel partecipa al Google AI Futures Fund, che investe e collabora con startup ambiziose che stanno costruendo il futuro dell'AI.