Avanzan los estudios científicos sobre la generación de vídeos a partir de texto
El Gabinete de Comunicación y Educación de la Universidad Autónoma de Barcelona (UAB), en el marco del proyecto del Observatorio para la Innovación de los Informativos en la Sociedad Digital (OI2), que impulsa junto a Radio Televisión Española (RTVE), está analizando los sistemas de inteligencia artificial (IA) en la creación de vídeos a partir de texto.
En el estudio, el equipo de investigación ha identificado diversos artículos científicos sobre las diferentes posibilidades de generación de texto a vídeo. Si bien la generación de imágenes a partir de texto es un tema ampliamente estudiado, por el contrario, la generación de vídeos no se ha explorado en su totalidad, según apuntan varios académicos.
Aunque la generación de vídeos enfrenta muchos desafíos por el costo potencial de computación, la escasez y relevancia del texto-vídeo y los conjuntos de datos que dificultan que el modelo comprenda la semántica de movimiento compleja, varias universidades han desarrollado diferentes modelos de generación que buscan mejorar la calidad y precisión de los resultados finales.
Entre ellos, la Universidad de Cornell elaboró el método Make-A-Video, en el que aplican los avances más recientes en la generación de texto a imagen (T2I) y lo aplican directamente a la generación de texto a vídeo (T2V). Este enfoque acelera el proceso de entrenamiento del modelo T2V ya que no necesita aprender representaciones desde cero y logra que los vídeos hereden la diversidad estética de los modelos actuales de generación de imágenes.
Además, la Universidad de Cornell elaboró el formato CogVideo, que también hereda un modelo de texto a imagen para transferir conocimientos y evitar entrenamientos desde cero de la herramienta con el fin de reducir el consumo de energía y mejorar la alineación del texto y los clips de vídeo.
Otras academias como la Universidad Nacional de Singapur proponen métodos híbridos, como el Show-1, que combinan difusión de texto a vídeo (VDM) en pixeles y en latentes para poder convertir texto a vídeo. Mientras otros modelos confían únicamente en uno de estos métodos, causando problemas de calidad y precisión del vídeo, Show-1 combina ambos para lograr resultados más acertados en la producción final.
Todavía queda por explorar y explotar los diferentes métodos para mejorar la calidad visual y la coherencia semántica de los vídeos generados a partir de texto. No obstante, el creciente aumento en estudios sobre el tema refleja la relevancia que está obteniendo. Es por esto que la Cátedra RTVE-UAB está comprometida con la investigación y divulgación de las tecnologías emergentes para beneficio de la sociedad en general.
El Gabinete de Comunicación y de Educación es un grupo consolidado y especializado en la investigación y divulgación científica, que pertenece al Departamento de Periodismo y Ciencias de la Comunicación de la UAB. Reconocido por AGAUR (Agència de Gestió d’Ajuts Universitaris i de Recerca) de la Generalitat de Catalunya como Grupo de Investigación Consolidado en función de su trayectoria, proyección y desarrollo, desarrolla proyectos e investigaciones en el terreno de convergencia entre la comunicación y la educación. Desde su creación, ha desarrollado iniciativas destinadas a integrar, con conciencia y libertad, las tecnologías de la comunicación en la denominada sociedad global o del conocimiento. Bajo la dirección de Santiago Tejedor, el Gabinete organiza diferentes másteres propios, como el Máster en Periodismo de Viajes (presencial y online), el Máster de Comunicación y Educación, el Máster de Comunicación del Medioambiente y el Máster en Gestión de la Comunicación Política y Electoral. El grupo posee una colección de publicaciones, en forma de artículos científicos, libros y capítulos de libro, y otros trabajos, muy amplia y variada que se renueva constantemente. Además, cuenta con un laboratorio de proyectos de innovación docente, transferencia y nuevos formatos que se conciben y desarrollan desde una perspectiva basada en la creatividad y el trabajo multidisciplinar. El Gabinete organiza cada año una expedición académica que recorre el mundo con estudiantes de diferentes universidades y carreras. Se trata de la Expedición Tahina-Can que ha sido premiada como mejor proyecto educativo de España. Además, cuenta con el portal Tu Aventura, la plataforma educativa infoEDU y el proyecto de newsgames y ciencia Reporteros de la ciencia.
