DreamX-Creator génère audio et vidéo synchronisés en 2K avec 7 B paramètres et attention cross-modale gated
Résumé
Publié sur arXiv le 1er septembre, DreamX-Creator 1.0 génère nativement vidéo et audio synchronisés grâce à un générateur compact de 7 milliards de paramètres exploitant une 'Gated Cross-Modal Attention' et un pipeline de raffinement 2K autorégressif en une étape. Les auteurs revendiquent des performances compétitives avec les meilleurs systèmes open source et promettent la mise à disposition des modèles pour la recherche.
Shared on Bluesky by 1 AI expert
Article original publié par arxiv.org
Lire l'article original →Titre original : DreamX-Creator génère audio et vidéo synchronisés en 2K avec 7 B paramètres et attention cross-modale gated