Captura y representación 3D de geometrias complejas para personajes virtuales

Empresa:  Disney Research Zurich

Agente tecnológico:  I3A – Universidad de Zaragoza (Contacto: Grupo Graphics and Imaging Lab, Diego Gutierrez, diegog@unizar.es )

 

Presentación del Caso:

Cada vez es más común la presencia de películas en cartelera con personajes digitales, bien sea estilizados o fotorrealistas. Con la llegada de la realidad virtual, estos personajes cobran aún más importancia. Muchas veces el proceso de creación del personaje comienza con una captura de datos de un actor real, a partir de la cual se crea el modelo digital. Además, las nuevas tecnologías de impresión 3D permiten ahora también la creación de modelos físicos que representan fielmente a un personaje concreto. Sin embargo, el pelo siempre ha supuesto un gran problema debido a su gran complejidad geométrica. Gracias al método desarrollado, el proceso es ahora sencillo, y permite variar el nivel de estilización deseado.

Para más información, imágenes y vídeo:

Proceso de trabajo:

  • Captura de datos, usando un sistema de 10 cámaras
  • Reconstrucción de la geometría básica (provisional) mediante técnicas de visión por computador
  • Asignación de color a cada vértice de la geometría, utilizando información de alta y baja frecuencia, así como algoritmos de ecualización de contraste
  • Estilización del color preservando la estructura original del pelo

Beneficios obtenidos por la empresa:

El principal beneficio actual se da en los parques temáticos que Disney posee por todo el mundo. Una fuente de ingresos es la venta de figuras hechas con impresión 3D. Los niños van, eligen un disfraz y se lo ponen, y el sistema les escanea. La figura se la mandan a casa en unos días. Sin embargo, hasta hace poco no podían representar fielmente el pelo del niño o niña concreto, dada su complejidad geométrica, por lo que lo sustituían por un modelo genérico. Esto por supuesto empeoraba el resultado final, al no ser la figura final una representación fiel del niño. Con este sistema ahora sí pueden reproducir con exactitud el pelo, con lo que las figuras 3D ganan realismo. La venta de estas figuras es en estos momentos una de las principales fuentes de ingresos dentro del parque por parte de la empresa.

Un centenar de profesionales participan en la Jornada sobre Transformación Tecnológica de la Industria

Un centenar de profesionales han participado en la Jornada sobre Transformación y Modernización Tecnológica de la Industria, enmarcada en la campaña europea Watify, que se ha celebrado  recientemente en el edificio Pignatelli. Esta campaña llega a Zaragoza con el objetivo de sensibilizar y estimular a Pymes y emprendedores en el camino hacia la digitalización. Durante el evento, organizado por el Instituto Aragonés de Fomento (IAF), el director de la Asociación Europea de Agencias de Desarrollo, Esteban Pelayo, ha sido el encargado de explicar en qué consiste Watify, una campaña de promoción que alienta a las empresas a adoptar sistemas digitales en todos los procesos y aumentar así su competitividad.

Tras la exposición de los casos de éxito de Podoactiva, Construcciones Lobe, y 7eData como ejemplos de transformación digital en nuestra Comunidad Autónoma, se ha presentado el Centro de Innovación Digital de Aragón o Digital Innovation Hub (DIH), que permitirá apoyar a las empresas en su digitalización. El director del Instituto Tecnológico de Aragón ITAINNOVA, Ángel Fernández, y el director gerente del IAF, Ramón Tejedor, han desgranado, junto a los representantes de los Institutos de Investigación en Ingeniería de Aragón (I3A) y de Biocomputación y Física de Sistemas Complejos (BIFI), los servicios del nuevo Centro de Innovación Digital en una mesa redonda moderada por el gerente del Clúster de Empresas TIC, Electrónica y Telecomunicaciones de Aragón.

En el DIH de Aragón están involucrados el IAF, ITAINNOVA y la Universidad de Zaragoza. El centro que se está diseñando pretende favorecer la innovación digital y es similar a otros que se están poniendo en marcha en otras regiones europeas parecidas a la nuestra. El objetivo es ayudar a las empresas aragonesas a avanzar de forma firme, resolviendo todas sus dudas, en el proceso de la transformación digital y en la Industria 4.0.

Ramón Tejedor, director gerente del IAF, ha sido el encargado de clausurar esta jornada que había inaugurado el director general de Industria, Pymes, Comercio y Artesanía, Fernando Fernández, afirmando que “lo digital es el presente y el futuro de los mercados». Por su parte, Tejedor ha recordado que «el 90% del tejido empresarial aragonés lo conforman Pymes o micro empresas, que deben asumir y adaptarse a los nuevos ecosistemas digitales, con sus herramientas y modelos”.

ITAINNOVA, IAF y Universidad de Zaragoza se encargarán del DIH en Aragón

 

El Instituto Tecnológico de Aragón será el orquestador junto con el Instituto Aragonés de Fomento y la Universidad de Zaragoza (a través del BIFI y el I3A) del Centro de Innovación Digital de Aragón.   Se trata de la propuesta aragonesa para el nuevo modelo de coordinación entre las iniciativas nacionales y europeas en el marco de la transformación digital de la Industria.  Con ello, Aragón se posiciona en la denominada red Pan-Europea de “Digital Innovation Hubs”, que pretende reforzar su competitividad manufacturera, al mismo tiempo que estar mejor preparados en la “Era Digital” en la que estamos inmersos.

El director de ITAINNOVA, Ángel Fernández, presentó la pasada semana, ante representanets de empresas y de la administración un adelanto de lo que será el Centro, bajo el título de “Computación de altas prestaciones y Sistemas Cognitivos para procesos de fabricación inteligentes, Logística y Robótica” . En la jornada sobre Transformación y Modernización Tecnológica de la Industria, celebrada en la sede del Gobierno de Aragón, en la que se ha presentado Watify, la campaña de la Unión Europea para el fomento de la transformación tecnológica y digital, también se han expuesto varios casos y experiencias de empresas aragonesas. Como ejemplos comparecieron representantes de Podoactiva e Inycom;  el Consejo de Colegios Agrícolas y 7eData; y Construcciones Lobe e Hiberus.

Para llevarlo a cabo, la Unión Europea (UE) ha  promovido la creación de un catálogo de DIHs cuyo objetivo es proporcionar a la Industria conocimientos e instalaciones que permitan, sobre todo a las PYMEs, acometer y dominar la llamada Transformación Digital. La existencia de los DIHs contribuirá a la digitalización de la industria, establecerá redes de cooperación y creará espacios en los llamados Centros de Competencia para mostrar experiencias y casos de éxito.  El primer resultado esperado es que  las PYMEs y  la Industria tengan estructurado y organizado gran parte  del sistema de innovación europeo en esta temática, así como toda la información de calidad accesible.

En Aragón, gracias a la iniciativa de la Estrategia para la Industria 4.0 (ver website aragonindustria40.es ) y de la Estrategia de Especialización Inteligente RIS3 Aragón, en lo que a fabricación inteligente e innovación se refiere, ha surgido la necesidad de crear un único  DIH para asegurar que cualquier Industria Aragonesa, especialmente las PYMEs, dispongan de toda la información y encuentren respuesta a cualquier pregunta. Esta ventanilla única va a ayudar  a definir el camino a seguir en cualquier reto que las empresas aragonesas quieran dar hacia su Transformación Digital.

ITAINNOVA, el IAF y la Universidad de Zaragoza constituyen el ecosistema inicial, aportando los Centros de Competencia desde los que empezar a dar los primeros servicios que la Industria demanda para su digitalización, destacando entre otros las tecnologías más avanzadas TIC, las  tendencias en robótica, la simulación y los gemelos digitales, el HPC y el Cloud, y la aplicación de la Inteligencia Artificial y el BIG-DATA a los procesos manufactureros y logísticos.

El reto a partir de ahora es doble a corto plazo. Por un lado, el DIH servirá para que los centros de investigación e innovación y las empresas de Aragón concurran al programa marco europeo Horizon 2020 con mejor posicionamiento y mayor masa crítica. Y por otro lado que los citados centros de competencia apoyados en los organismos intermedios, especialmente los clústers como dinamizadores del proceso de innovación, creen un verdadero ecosistema que acelere la digitalización de las empresas y asegure la competitividad de nuestra Industria. Cabe destacar las oportunidades que esta iniciativa abre a nuestras empresas tecnológicas grandes, pequeñas y start-ups dado que servirá de canal para que  las mejores soluciones tecnológicas encuentren en esta red Pan-Europea nuevas oportunidades de exportación, invirtiendo la tendencia de compra de tecnología foránea que vivimos en la actualidad.

A medio plazo, deberán crearse nuevos servicios que nazcan de la cooperación y modelos de negocio y de explotación de los resultados que sirvan también para garantizar la sostenibilidad del propio Centro de Innovación Digital.

El Gobierno de Aragón, a través de sus Departamentos de Economía, Industria y Empleo, y de Innovación, Investigación y Universidad coordina sus esfuerzos y alinea sus políticas con Europa para asegurar a través de la I+i la asimilación de la transformación digital por nuestro tejido empresarial y favorecer la competividad a través de una economía más basada en el conocimiento y la cooperación.

 

Tecnologías Audiovisuales Avanzadas: Realidad Aumentada en Entornos Urbanos

Empresa:  Empresas o administraciones en el ámbito turístico

Agente tecnológico: i3A

Presentación del Caso:

El arte urbano constituye un patrimonio de gran interés cultural que merece la pena conservar y catalogar. Este patrimonio incluye tanto edificios históricos, estatuas y monumentos, así como nuevas expresiones de arte urbano, tales como grafitis. Con el paso del tiempo, dichos elementos se degradan, cambian de lugar, en incluso desaparecen. Existen incontables ejemplos de elementos monumentales desaparecidos en los últimos años debido a la ejecución de planes urbanísticos más modernos. De dichos edificios nos han llegado referencias a través de archivos históricos y en algunos casos fotografías de la época.

La combinación de nuevas tecnologías, como la Visión por Computador, la Realidad Aumentada o la generación de imágenes 3D permite la reconstrucción y visualización de elementos urbanos desaparecidos o que han cambiado notablemente con el tiempo. El caso que presentamos consiste en el desarrollo de una aplicación de Realidad Aumentada y su implementación en una plataforma móvil para la reconstrucción del patrimonio cultural perdido u oculto en entornos urbanos.

Actualmente las aplicaciones móviles de Realidad Aumentada se basan en marcadores 2D o geometrías simples pre-entrenadas, que son problemas abordables con la capacidad de cómputo de los móviles disponibles. En este proyecto se trasladan los procesos más pesados a la nube para poder atacar un problema mucho más complejo, basado en una nube 3D de puntos que modela un entorno urbano.

El piloto implementado en el proyecto demuestra el campo de aplicación en el ámbito turístico, permitiendo mostrar in-situ elementos del patrimonio que se han perdido o que actualmente están ocultos. En concreto se ha desarrollado una aplicación que permite tomar una fotografía desde cualquier posición en la Plaza San Felipe de Zaragoza y ver esa misma fotografía aumentada con una recreación de la desaparecida Torre Nueva en su ubicación original.

 

Proceso de trabajo:

En el proceso de trabajo se distinguen 6 fases:

  • Diseño y desarrollo de la arquitectura de sistema. Se diseña y pone en marcha un servidor para las tareas de cómputo en la nube y respuesta a las aplicaciones de usuario.
  • Geo posicionamiento basado en imágenes. Se desarrolla un módulo capaz de identificar la ubicación correspondiente a una fotografía, analizando las características que la describen y comparándolas contra las registradas en una base de datos.
  • Cálculo del punto de vista de una imagen. Se desarrolla un módulo capaz de calcular los 6 grado de libertad (3 dimensiones espaciales + 3 ángulos de orientación) con que se ha tomado una fotografía en una ubicación determinada.
  • Estimación de las condiciones de iluminación de una imagen. Se desarrolla un módulo capaz de estimar los principales parámetros de iluminación de una escena (posición y orientación de las fuentes de luz, componente difusa, etc.) a partir de una o varias imágenes.
  • Generación de contenido virtual. Se desarrolla un módulo capaz de generar un render de un modelo 3D dados un punto de vista y unas condiciones de iluminación determinadas, de manera que empaste de manera realista sobre una imagen de fondo a partir de la cual se han determinado el punto de vista y la iluminación.
  • Integración del sistema. Se integran todos los módulos en una estructura cliente-servidor de manera que desde una aplicación cliente se pueda capturar una imagen y lanzar una petición para que del lado del servidor se pueda geolocalizar, calcular el punto de vista y el modelo de iluminación y devolver al cliente una versión de la imagen aumentada con contenido virtual.

La siguiente figura ilustra las fases del proyecto sobre el piloto del proyecto que reconstruye la desaparecida Torre Nueva en la Plaza San Felipe de Zaragoza. En una primera fase se realiza el modelado 3D del objeto a representar (Torre Nueva), así como la ubicación física donde se va a presentar (Plaza San Felipe de Zaragoza). Posteriormente, el usuario se sitúa en la plaza tomando una instantánea de la misma. La fotografía su sube a la nube donde se procesa y se determina en primer lugar la localización espacial del usuario y la posición de la cámara. Con esta información se genera una imagen virtual del elemento a empastar en la imagen en las condiciones de iluminación similares a las actuales. El resultado se devuelve al terminal móvil para su visualización por parte del usuario.

Figura: Ejemplo de reconstrucción virtual de un edificio histórico desaparecido, y su representación en un terminal móvil, basado en técnicas de visión por computador, computación en la nube y rendering de imágenes.

Beneficios obtenidos por la empresa:

La Realidad Aumentada presenta un gran potencial en varios campos tales como la medicina, la educación, la cultura, industrial, publicidad, entornos urbanos, etc. En el ámbito cultural permitirá la generación de aplicaciones y servicios que potencien el turismo cultural, así como la educación ciudadana en el conocimiento del patrimonio cultural desaparecido y preservación del actual.

El impacto de la aplicación desarrollada es enorme, ya que la Realidad Aumentada supone un nuevo formato con el que presentar a los usuarios contenidos digitales integrados en un entorno real. En un contexto en el que los usuarios son cada más pro-activos en la selección de los contenidos que consumen, resulta de gran valor poder determinar contenidos relevantes en función de la ubicación del usuario y poder integrarlos en el espacio real en que se encuentra.

El desarrollo de terminales móviles con mayores prestaciones va a generar una explosión de aplicaciones audiovisuales en dichas plataformas. En unos pocos años se prevé la aparición de dispositivos orientados específicamente a realidad aumentada (Ej: Microsoft Hololens). El claro avance de este tipo de dispositivos va a ir acompañado de la necesidad de nuevos servicios y aplicaciones basados en cómputo distribuido entre la nube y el terminal.

Más información en http://tama.unizar.es/

 

 

Tecnologías Inteligentes para el Transporte Autónomo de Mercancías en Interiores y Exteriores – TITAM_ie

Empresa:  ACCIONA INFRAESTRUCTURAS, SECTOR: CONSTRUCCIÓN

Agente tecnológico: i3A

Presentación del Caso:

El objetivo principal de este proyecto es el desarrollo de tecnologías para el transporte automatizado de cargas en ambientes no estructurados, tanto en interiores como en exteriores, que cuenten con la capacidad de planificación y re-planificación automática de rutas, de forma segura y robusta.

La consecución de este objetivo permitirá a cada una de las empresas integrantes del consorcio situarse en una posición de liderazgo en la automatización, robotización y creación de aplicaciones software y de comunicaciones específicas asociadas, en diferentes sectores productivos, en los cuales existe un gran potencial de desarrollo ya que, en la actualidad, el uso de sistemas robotizados es muy bajo o nulo.

En el proyecto se desarrolló un robot autónomo (UAV), adaptado para el transporte de grandes piezas en un parque industrial de grandes dimensiones, con almacenes interiores y exteriores. El robot se debe localizar en todo momento, y desplazarse autónomamente en este escenario, respondiendo a órdenes de transporte de piezas entre las diversas zonas del almacén. Los retos fundamentales que presentaba el proyecto eran:

  • Localización precisa en cualquier parte del almacén, interior o exterior, integrando de manera óptima la información de los sensores embarcados
  • Planificación del desplazamiento a partir de información proporcionada por el supervisor de las posiciones inicial y final, y del mapa sensorial del escenario construido previamente, y actualizado periódicamente
  • Navegación autónoma a partir de la planificación, evitando los obstáculos del entorno, cuya ubicación no es conocida a priori, dado que el escenario el cambiante debido a la actividad logística desarrollada en él.

Robot en escenario exterior

Robot en escenario interior

Enlaces a vídeos: Vídeo1  , Vídeo2

Proceso de trabajo:

El Proyecto se desarrolló entre los años 2011 y 2014. Los principales hitos fueron:

  • Desarrollo de los algoritmos de percepción, localización, planificación y navegación
  • Toma de datos sensoriales del escenario interior y exterior del parque industrial
  • Desarrollo de los algoritmos de percepción, localización, mapeo, planificación y navegación autónoma
  • Experimentación y puesta a punto de los algoritmos en el escenario interior
  • Experimentación y puesta a punto de los algoritmos en el escenario exterior
  • Experimentación y puesta a punto de los algoritmos en ambos escenarios para una localización y navegación continuas, con la integración en cada momento de los sensores adecuados.

 

Beneficios obtenidos por la empresa:

El proyecto se planteó como una transferencia tecnológica del know-how del grupo de Robótica, Percepción y tiempo real del I3A, a la empresa en todos los aspectos relacionados con las funcionalidades robóticas de un vehículo terrestre autónomo, para dotarle de capacidad de decisión en cuanto a los movimientos a realizar en un entorno de actividad industrial real. En este sentido, el robot y todas las capacidades de navegación autónoma desarrollados se adaptaron a las enormes dimensiones del escenario y a la necesidad de realizar grandes recorridos y durante un tiempo de trabajo elevado, sin intervención humana.

Los beneficios pretendidos es la de disponer de vehículos con estas capacidades que simplifiquen y automaticen las tareas logísticas en escenarios y aplicaciones como el utilizado en el proyecto. En el momento de finalizar el proyecto no existían vehículos comerciales autónomos con todas las características y funcionalidades del desarrollado. Se trata de un primer prototipo, primer paso para el desarrollo de futuros vehículos comercializables que puedan introducirse en el mercado.