EN
6GTWINROAD proposes the use of 6G Technologies that allow the creation of digital twins for connected and autonomous mobility (CAM) on the roads. For this purpose, state-of-the-art technologies will be used, such as simulation platforms to evaluate the characteristics of the mobile network in urban and interurban mobility environments, advanced HD maps with volumetric information, and artificial vision algorithms to estimate traffic conditions.
- Sub-project 3:
This subproject investigates the use of artificial intelligence (AI) technologies to:
- Support the development of a digital twin of a road vehicle environment
- Demonstrate the sensing capability of 5G/6G technologies for object detection
- Integrate 5G/6G sensing technologies into realistic vehicle environments that make use of Cloud and Edge Computing technologies
- Contribute to the digital transformation of the automotive sector
ES
6GTWINROAD plantea el uso de Tecnologías 6G que permiten la creación de gemelos digitales para la movilidad conectada y autónoma (CAM) en las carreteras. Para este fin, se usarán tecnologías de punta como plataformas de simulación para evaluar las características de la red móvil en entornos de movilidad urbana e interurbana, mapas HD avanzados con información volumétrica y algoritmos de visión artificial para estimar el estado del tráfico.
- Sub-proyecto 3:
Este subproyecto tiene como objetivo la investigación aplicada al uso tecnologías de inteligencia artificial (IA) para:
- Apoyar la creación de un gemelo digital de un entorno vehicular de carretera
- Demostrar la capacidad de sensado de las tecnologías 5G/6G para la detección de objetos
- Integrar las tecnologías de sensado 5G/6G en entornos vehiculares realistas que hagan uso de tecnologías Cloud y Edge Computing
- Contribuir a la transformación digital del sector automotriz.
EN
Related to sub-project 3.
- Volumetric 3D Road Environment Reconstruction.
The reconstruction of road related environments is normally created thanks to simulated environments or currently available capturing technologies such as LIDAR or traditional RGB cameras. Commercial HD Maps with ADAS oriented information will be obtained and used as baseline information. Within this activity, the use of new sensors will be explored, in particular RGB cameras with an additional Depth component (called RGBD) created thanks to the focus stacking technology, with the goal of enriching the traditional HD, ADAS oriented, digital aps with a volumetric component, creating novel Volumetric Digital Maps: 3D reconstruction of the surroundings of the vehicle, represented using the Point Cloud volumetric format.
This task will also select the most suitable technologies for the reconstruction of Volumetric 3D Maps and will test them in the selected road environment for the use case.- Cost: 155,000 €
- Timeline: Q3 2023 to 31/12/24
- AI-based volumetric video processing
The AI based processing of the content created will be explored within this task. The multiple scope if this task is then: 1) remote (cloud or edge) real time AI based processing of the RGBD video for object recognition (Pedestrians, Animals, Bicycles, Vehicles); 2) remote (cloud or dge) novel computer vision methods for volumetric video (Point Clouds); 3) GBD camera calibration systems, capable of being used to create high fidelity volumetric reconstructions of the vehicle surroundings; 4) Artificial Intelligence methods for the improvement of the volumetric video quality, both online and offline.- Cost: 80,000 €
- Timeline: Q3 2023 to 31/12/24
- Use case testing and execution
The pilot testing will use both physical and digital infrastructure created to validate the selected use cases and extract the relevant KPI. This task will integrate the different technologies deployed in WP3 (Volumetric Digital Maps) and WP4 (Enhanced machine learning based solutions for context awareness in road environments), deploy and test them in the road environment.- Cost: 70,000 €
- Timeline: Q3 2023 to 31/12/24
- Ecosystem building and standardization
This task will promote the results in international forums related to the areas of 6G and also the automotive sector. Some of the considered fora are 5GAA, 5G-ACIA, and ETSI. In addition, this task will be focused on building a local ecosystem which can benefit from the collaboration established through this project, and also the relationship that can be established through the participation in the SNS Joint Undertaking and the collaboration that may arise with other European Partnerships, such as the CCAM. The ultimate goal of this project is to ensure that a strong ecosystem is built at the national level to ensure the resilience of the country towards the digital future.- Cost: 38,750 €
- Timeline: Q3 2023 to 31/12/24
ES
Relacionado con el sub-proyecto 3.
- Reconstrucción volumétrica 3D de entornos viales.
La reconstrucción de entornos relacionados con la carretera se crea normalmente gracias a entornos simulados o tecnologías de captura disponibles en la actualidad, como LIDAR o cámaras RGB tradicionales. Se obtendrán mapas HD comerciales con información orientada a ADAS y se utilizarán como información de referencia. Dentro de esta actividad, se explorará el uso de nuevos sensores, en particular cámaras RGB con un componente adicional de Profundidad (llamado RGBD) creado gracias a la tecnología de apilamiento de foco, con el objetivo de enriquecer los tradicionales apps digitales HD, orientados a ADAS, con un componente volumétrico, creando novedosos Mapas Digitales Volumétricos: Reconstrucción 3D del entorno del vehículo, representado mediante el formato volumétrico Point Cloud.
Esta tarea también seleccionará las tecnologías más adecuadas para la reconstrucción de Mapas Volumétricos 3D y las probará en el entorno vial seleccionado para el caso de uso.- Presupuesto: 155,000 €
- Calendario: Q3 2023 - 31/12/24
- Procesamiento volumétrico de vídeo basado en IA
En esta tarea se explorará el procesamiento basado en IA de los contenidos creados. El alcance múltiple de esta tarea es entonces 1) procesamiento remoto (en la nube o en el edge) en tiempo real basado en IA del vídeo RGBD para el reconocimiento de objetos (peatones, animales, bicicletas, vehículos); 2) métodos novedosos de visión por ordenador remotos (en la nube o en el edge) para vídeo volumétrico (nubes de puntos); 3) sistemas de calibración de cámaras GBD, capaces de utilizarse para crear reconstrucciones volumétricas de alta fidelidad del entorno del vehículo; 4) métodos de Inteligencia Artificial para la mejora de la calidad del vídeo volumétrico, tanto en línea como fuera de línea.- Presupuesto: 80,000 €
- Calendario: Q3 2023 - 31/12/24
- Prueba y ejecución de casos de uso
La prueba piloto utilizará la infraestructura física y digital creada para validar los casos de uso seleccionados y extraer los KPI relevantes. Esta tarea integrará las diferentes tecnologías desplegadas en el WP3 (Mapas Digitales Volumétricos) y WP4 (Soluciones mejoradas basadas en el aprendizaje automático para el conocimiento del contexto en entornos viales), las desplegará y las probará en el entorno vial.- Presupuesto: 70,000 €
- Calendario: Q3 2023 - 31/12/24
- Creación de un ecosistema y estandarización
Esta tarea promoverá los resultados en foros internacionales relacionados con las áreas de 6G y también con el sector de la automoción. Algunos de los foros considerados son 5GAA, 5G-ACIA y ETSI. Además, esta tarea se centrará en la construcción de un ecosistema local que pueda beneficiarse de la colaboración establecida a través de este proyecto, así como de la relación que pueda establecerse a través de la participación en la SNS-JU y la colaboración que pueda surgir con otras asociaciones europeas, como la CCAM. El objetivo último de este proyecto es garantizar la construcción de un ecosistema fuerte a nivel nacional que asegure la resiliencia del país hacia el futuro digital.- Presupuesto: 38,750 €
- Calendario: Q3 2023 - 31/12/24