arxiv.org détecté sur le web

DreamX-Creator génère audio et vidéo synchronisés en 2K avec 7 B paramètres et attention cross-modale gated

AI Video Video Generation Multimodal video-generation multimodal

Résumé

Publié sur arXiv le 1er septembre, DreamX-Creator 1.0 génère nativement vidéo et audio synchronisés grâce à un générateur compact de 7 milliards de paramètres exploitant une 'Gated Cross-Modal Attention' et un pipeline de raffinement 2K autorégressif en une étape. Les auteurs revendiquent des performances compétitives avec les meilleurs systèmes open source et promettent la mise à disposition des modèles pour la recherche.

Shared on Bluesky by 1 AI expert