Automated processes and intelligent tools in CG media production

Abstract

La producció moderna dels mitjans descansa de forma important sobre continguts generats per ordinador, tals com animacions 3D, i efectes visuals digitals. Aquests actius complexos poblen videojocs, pel•lícules, televisió, dispositius mòbils i internet, però crear-los encara és una feina complexa, que requereix molta intervenció humana, té un flux de treball complex i no estàndard, procliu als errors, i demana un esforç important.

Aquesta tesi contribueix en dues àrees de contingut generat per ordinador: la investigació inicial es dirigeix a l’automatització de “rigging”, de l’expressió facial emocional i de moviments expressius, i de la generació semiautomàtica de “clips”; a la investigació més recent, basada en un treball extens amb la indústria, la tesi defineix un flux genèric de producció de mitjans generats per ordinador, inclosos processos de producció i un model de “pipeline”, i, a partir d’aquest flux, es mostren i es discuteixen unes aproximacions a l’automatització dels passos més crítics des d’una perspectiva tant industrial com acadèmica. En resum, la tesi contribueix amb un conjunt d’algorismes i eines “familiaritzats” amb el “pipeline”, que ajuden l’usuari en el procés de producció, és a dir, eines intel•ligents.

Modern media production heavily relies on computer generated content, such as 3D animations and digital visual effects. Those complex assets populate videogames, films, television, mobile devices and the Internet, but their creation is still a complex task requiring a lot of human intervention, and with non standard complex workflows, which are prone to errors, and demand more production effort.

The thesis contributes in two main areas of computer generated content: the oldest research is geared towards the automation of rigging, of emotional facial expression and emotional movements; and towards semi-automated generation of clips; in the most recent research, based on extensive work with the industry, the thesis defines a generic computer generated media production workflow, including production processes and a sample pipeline, and starting from this workflow, approaches to automate the most critical steps are shown and discussed with both scientific and industry eyes. In summary, this thesis contributes with a series of algorithms and tools that are “aware” of the pipeline, and assist the user in the production process, thus: intelligent tools.

La producción moderna de los medios descansa de forma importante en contenidos generados por ordenador, tales como animaciones 3D, y efectos visuales digitales. Estos activos complejos pueblan los videojuegos, películas, televisión, dispositivos móviles e internet, pero crearlos es aún una faena compleja, que demanda mucha intervención humana, implica un flujo de trabajo complejo no estándar, proclive a errores, y exige un esfuerzo importante.

Esta tesi contribuye en dos áreas de contenido generado mediante ordenador: la investigación inicial se dirige a la automatización del “rigging”, de la expresión facial emocional i de movimientos expresivos, i de la generación semiautomática de “clips”; en la investigación más reciente, basada en un trabajo extenso en la industria, la tesis define un flujo genérico de producción de medios generados mediante ordenador, incluyendo procesos de producción y un modelo de “pipeline”, y, a partir de este flujo, se muestran y discuten unas aproximaciones a la automatización de los pasos más críticos desde una perspectiva tanto industrial como académica. En resumen, la tesis contribuye con un conjunto de algoritmos y herramientas “familiarizados” con el “pipeline”, que ayudan al usuario en el proceso de producción, es decir, unas herramientas inteligentes.