OBIETTIVO REALIZZATIVO: OR4 Tipo di attività:

STMicroelectronics is a world leader in the production of integrated devices and has a rich portfolio of manufacturing technologies for semiconductor devices that will make it available during all stages of the project. In particular, it has advanced Fully Depleted Silicon-on-Insulator (FD-SOI) technologies, CMOS (Complementary Metal Oxide Semiconductor), RF-SOI (RF Silicon-On-Insulator), Bi-CMOS, BCD (Bipolar, CMOS, DMOS), Silicon Carbide (SiC) and MEMS. The most significant data for the site of Catania, involved in the project are: Clean Room 22,141 sqm, Wafer Fab 6 "/ 8", Epitaxy: 6 "/ 8", EWS: 6

"/ 8".

The project will include the participation of the research and development group of the Central R & D Automotive & Discrete Group (ADG), as well as the ADG Micro & Infotainment and ADG Audio & Body Division divisions. STMicroelectronics has the ability, in terms of human resources, design and development skills and infrastructures, to address project activities. It has equipped advanced research laboratories (Innovation LABs) for prototyping devices, as well as their electrical, optical and chemical-physical characterization.

UNICT participates in the project, involving the Departments of Mathematics and Informatics (DMI), Physics and Astronomy (DFA) and Biomedical and Biotechnical Sciences (BioMETEC) whose competencies are as follows:

•DMI: The DMI IPLAB Group provides the project with the various skills and experience gained in the field of Multimedia and Computer Vision

•DFA: The DFA Material Structure Group provides the project with the various skills and experience gained in the field of material science and the long activity on Si-based materials and semiconductors in general. Among other things, they emphasize nano-electronic, nano-photon and sensory skills.

•BIOMETEC: The Biometec Physiology Unit has all the tools necessary to carry out the activities envisaged in this project both in terms of scientific expertise of each of the components of the research group as well as of the equipment required to carry out the project objectives set in the project

MTA has more than 10 years of experience and is capable of internally studying and designing various mechanical, aesthetic and optical parts, metal and plastic materials, electronic systems, custom hardware and software solutions, etc. The MTA experience in automotive is critical to guiding the correct positioning of sensors inside the car's passenger compartment.

OBIETTIVO REALIZZATIVO: OR4 Tipo di attività:

- Ricerca Industriale Soggetti coinvolti:

- STMicroelectronics srl

- Università degli Studi "G. d'Annunzio" CHIETI-PESCARA - MTA spa

- Università degli Studi di PALERMO (Distretto Tecnologico Sicilia Micro e Nano Sistemi scarl) - Università degli Studi di CATANIA

- MR&D spa (INNOVAAL S.C. A R.L.)

- Consiglio nazionale delle ricerche (INNOVAAL S.C. A R.L.)

Localizzazione:

- STMicroelectronics srl - STMicroelectronics srl, Catania (Catania)

- Università degli Studi "G. d'Annunzio" CHIETI-PESCARA - Campus Universitario di Chieti ITAB, Chieti (Chieti)

- MTA spa - MTA spa Codogno, Codogno (Lodi)

Università degli Studi di PALERMO (Distretto Tecnologico Sicilia Micro e Nano Sistemi scarl) -Università degli Studi di Palermo DEI, Palermo (Palermo)

- Università degli Studi di CATANIA - Università degli studi di Catania Dipartimenti DMI, DFA, BIOMETEC, Catania (Catania)

- MR&D spa (INNOVAAL S.C. A R.L.) - MR&D spa, Foggia (Foggia)

- Consiglio nazionale delle ricerche (INNOVAAL S.C. A R.L.) - CNR IMM Lecce, Lecce (Lecce) Durata in mesi:

Attività necessarie per la realizzazione dell'obiettivo

Le attività del presente OR saranno volte alla progettazione e realizzazione dei componenti del Modulo Vision del dimostratore finale ADAS+, sulla base delle specifiche definite in OR1.

Si dovranno pertanto affrontare problematiche di analisi numerica complessa per il riconoscimento facciale e termografia del viso dai dati provenienti dalle telecamere a luce visibile e IR, di integrazione di sistema, di circuiteria di alimentazione e gestione dei componenti elettronici multipli. Le soluzioni proposte faranno leva sui sui metodi avanzati di analisi numerica basati su Convolutional and Neuronal Network, tecnologie di System Integration e sulle metodologie di analisi di componentistica multipla

ll presente OR si articolerà in 4 attività di Ricerca Industriale (RI):

RI 4.1 Progettazione e Realizzazione di algoritmi avanzati per il monitoraggio del guidatore basati su l’uso di microcamere a luce visibile

Sulla base delle specifiche funzionali definite in RI1.2, tale attività sarà volta alla progettazione e realizzazione degli algoritmi avanzati per il monitoraggio del guidatore mediante l’utilizzo di microcamere a luce visibile focalizzando gli aspetti principali:

RI 4.2 - Progettazione e Realizzazione di algoritmi avanzati per il monitoraggio del guidatore basati su l’uso di telecamere IR

RI 4.3 - Progettazione e Realizzazione dei moduli radar e lidar per il monitoraggio perimetro esterno all’auto

Sulla base dei dispositivi prototipali realizzati in RI2.3 e 2.4, Tale attività di ricerca sarà volta alla progettazione e realizzazione dei moduli elettronici (board) per il monitoraggio perimetro esterno all’auto integranti i dispositivi radar e lidar realizzati in OR2.

RI 4.4 - Progettazione e Realizzazione board dedicate per il controllo integrato dei Moduli Tecnologici Vision e porting algoritmi

Sulla base delle attività di ricerca svolte nei precedenti RI di questo OR, la presente attività di ricerca sarà volta alla progettazione e realizzazione dei moduli Vision per il monitoraggio del guidatore livello di distrazione e comportamento di “collera stradale mediante i segnali acquisiti dalle microcamere a luce visibile e del livello di attenzione mediante i segnali acquisiti dalle telecamere a luce IR.

The activities of this OR will focus on the design and development of the components related to the Vision Module of the ADAS + prototype, based on the specifications defined in OR1.

To accomplish the objective above described, several technical problems must be faced related to complex numerical analysis for face recognition and face thermography from the data collected by both the visible light microcamera and the IR camera, System Integration, design of biasing circuit and driving of multiple electrical components without electromagnetic interferences. The proposed solutions will leverage on advanced numerical analysis methodologies based on convolutional and Neuronal Network, System Integration technologies and multiple component managing methods

This OR will be structured into 4 Industrial Research Activities (RI):

RI 4.1 Design and Development of advanced algorithms for driver monitoring based on the use of visible microcameras

On the basis of the technical specifications defined in RI 1.2, this research activity will be devoted to the design and the development of advanced algorithms for the driver’s monitoring by using visible light microcameras.

RI 4.2 - Design and Development of advanced algorithms for driver monitoring based on the use of IR camera

RI 4.3 - Design and Development of both radar and lidar modules for the monitoring of the perimeter outside the car

On the basis of the device prototype developed in RI 2.3 nd 2.4, this research activity will be devoted to the design and the development of the electronic modules (boards) integrating both the radar and lidar devices made in OR2, for the monitoring of the perimeter outside the car.

RI 4.4 - Design and Development of specific boards for the integrated control of the Vision technological modules and algorithms porting

On the basis of the research activities carried out in the previous RI, this research activity will be aimed at the design and development of the Vision modules for the driver’s distraction and behavior monitoring through the signals captured by microcameras in visible light and the level of attention by signals captured by IR light cameras.

Conoscenze, moduli, elementi componenti, risultati già disponibili o acquisibili

STMicroelectronics è leader nella progettazione e realizzazione di dispositivi a semiconduttore basati su silicio . . Dispone di laboratori di ricerca attrezzati (Innovation LABs) per effettuare la prototipazione dei dispositivi, nonché la loro caratterizzazione elettrica, ottica e chimico-fisica.

UNICT coinvolgerà i Dipartimenti: Matematica e Informatica (DMI) con competenze nell’ambito del Multimedia e della Computer Vision utili per il modulo vision, Fisica e Astronomia (DFA) con competenze nell’ambito della scienza dei materiali per lo sviluppo di sensori innovativi e (BioMETEC) che ha le competenze scientifiche per la validazione del modulo filiologico

MTA ha più di 10 anni d’esperienza ed è in grado di effettuare internamente studi e progettazioni delle varie parti meccaniche, estetiche ed ottiche, materiali metallici e plastici, sistemi elettronici, soluzioni custom hardware e software , ecc..L’esperienza di MTA nell’automotive è fondamentale per guidare il corretto posizionamento dei sensori all’interno dell’abitacolo dell’auto.

UNICP. ha sviluppato diversi modelli per la stima dello stato psicofisico di un individuo mediante registrazione della modulazione della temperatura cutanea facciale mediante imaging infrarosso termico

Le attività di ricerca e sviluppo di INNOVAAL saranno principalmente dedicate alla ricerca brevettuale e alla diffusione dei risultati della ricerca. Innovaal parteciperà al progetto anche con le competenze dei seguenti soci:

a)CNR IMM (INN-CNR IMM) In relazione alle attività proprie della presente proposta il CNR-IMM di Lecce è particolarmente attivo da diversi anni nel settore dei Sensori e Microsistemi Intelligenti per la sicurezza e la qualità della vita nei settori dei Trasporti.

b)M&RD (INN-M&RD). La società ha maturato esperienza nella realizzazione hardware e software, e realizzerà la piattaforma hardware control unit per i sensori

a)UNIPA (DMN-UNIPA). utilizzerà le conoscenze acquisite per la realizzazione di nuovi prototipi di LiDAR per applicazioni

STMicroelectronics is a leader in the design and manufacture of silicon based semiconductor devices. . It has equipped research laboratories (Innovation LABs) for prototyping devices as well as their electrical, optical and chemical-physical characterization

UNICT will involve the Departments: Mathematics and Computing (DMI) with expertise in Multimedia and Computer Vision for the Vision module, Physics and Astronomy (DFA) with expertise in materials science for the development of innovative sensors and (BioMETEC) which has the scientific expertise to validate the physiological module

The research team of the INSTM Research Unit in Messina has the expertise to develop and manufacture prototypes of chemical sensors for environmental monitoring and biomedical and automotive sectors.

UNICP. has developed several models for estimating the psychophysical state of an individual by recording facial skin temperature modulation by infrared thermal imaging.

INNOVAAL's research and development activities will be mainly dedicated to patent research and dissemination of research results. Innovaal will also participate in the project with the skills of the following members

a) CNR IMM (INN-CNR IMM) In relation to the activities of this proposal, CNR-IMM in Lecce has been active for many years in the field of Intelligent Sensors and Intelligent Microsystems for Safety and Quality of Life in the Transport Sector

b) M & RD (INN-M & RD). The company has gained experience in hardware and software realization, and will develop the hardware control unit platform for sensors

b) UNIPA (DMN-UNIPA). will use the acquired knowledge for the development of new LiDAR prototypes for ADAS applications,

OBIETTIVO REALIZZATIVO: OR5

Nel documento Dipartimento per la Formazione Superiore e per la Ricerca Direzione Generale per il coordinamento, la promozione e la valorizzazione della ricerca (pagine 50-53)