COGNITIVE TELECOMMUNICATION SYSTEMS

iten
Codice
60279
ANNO ACCADEMICO
2021/2022
CFU
5 cfu al 2° anno di 10378 INTERNET AND MULTIMEDIA ENGINEERING (LM-27) GENOVA
SETTORE SCIENTIFICO DISCIPLINARE
ING-INF/03
LINGUA
Inglese
SEDE
GENOVA (INTERNET AND MULTIMEDIA ENGINEERING)
periodo
1° Semestre
materiale didattico

PRESENTAZIONE

   This course aims at provining to the Master student basic and advanced concepts on the design of methods and techniques for data driven self-awareness in autonomous artificial agents . Signal Processing, Data Fusion and Machine learning under a Bayesian pespective will be the key dimensions on which introduced concepts will be described. Laboratory application and agent design will integrate course theoretical activities  

OBIETTIVI E CONTENUTI

OBIETTIVI FORMATIVI

The course aims at providing theory and techniques for architectural and functional design of interactive cognitive dynamic systems. Topics are related to data fusion, mutilevel bayesian state estimation and their application to cognitive video and radio domains. Project based learning allows students to acquire design capabilities in the field.

OBIETTIVI FORMATIVI (DETTAGLIO) E RISULTATI DI APPRENDIMENTO

La frequenza e la partecipazione attiva alle attività formative proposte (lezioni frontali e attività in laboratorio) e lo studio individuale consentiranno allo studente di

-Conoscere i fondamenti sulle architetture e le logiche di rappresentazione della conoscenza in  sistemi e reti di agenti cognitivi autonomi e semi autonomi multisensoriali, artificiali, dinamici ed autoorganizzanti

- Conoscere  le principali metodologie probabilistiche di rappresentazione , elaborazione e fusione di segnali temporali propriorecettivi ed exterorecettivi multisensoriali in agenti cognitivi dinamici (p.e. veicoli semi autonomi, radio cognitive, etc.) 

- Conoscere  le metodologie di apprendimento automatico data driven e non supervisionato di modelli dinamici predittivi e di analisi (modelli generativi) a partire da sequenze temporali  di segnali eterogenei

-Conoscere e acquisire  capacità di uso di strumenti di programmazione e di simulazione per analizzare dataset preregistrati di sequenze temporali ed applicare a tali sequenze metodi di apprendimento di modelli generativi e metodi di predizione e stima dinamica dello stato degli agenti.

- Integrare le conoscenze suddette nell'ambito di framework di laboratorio per sviluppare prototipi simulativi di agenti cognitivi dinamici artificiali con funzionalità di la Situation awareness e di Self awareness 

- Acquisire la capacità di analizzare, commentare  e descrivere i risultati  ottenuti applicando quanto appreso a dataset simulati o ricavati da sistemi  artificiali che descrivano situazioni dinamiche di agenti autonomi (p.e.veicoli  autonomi, robot e droni), sotto forma di report, presentazioni con slide,poster,

 

PREREQUISITI

Teoria delle Probabilità, Procesi aleatori, Teoria dei segnali

 

MODALITA' DIDATTICHE

The course is divided in two parts. Lectures in frontal teaching modality presented together with slides will aim at describing the theroretical concepts and the techniques. Such lectires will cover 40 hours and can be recorded and made available on those channels recommended by Univeristy of Genova. The second part is done within a laboratory carried on by an expert of the field and will involve application of programs in Matlab framework that correspond to theories and techniqeus shon at lectures. Students will be required to present a report at the end of each lab experience. 10 Lab experiences are planned and will help students to be prepared to present the final report to be discussed during the exam that will show application and discussion of techniques abnd results over a dataset assigned.. 

PROGRAMMA/CONTENUTO

  • Introduction to cognitive dynamic systems 
    1. Proprioceptive and exteroceptive sensors 
    2. Representation and inference for self awareness 
    3. First person and Third Person representations
    4. Self awareness as result of incremental learning of probabilistic representations
  • Bayesian Networks
    1. General concepts: conditional independence, examples, Markovianity. Inference: Naive method. Belief propagation
    2. Dynamic Bayesian Networks. Slices, model unfolding, Kaman filters and HMM as DBNs . Filters as two level Bayesian networks
  • Bayesian inference: filtering, smoothing, prediction and update
    1. Kalman Filter: prediction and update. Discussion of model filter and example
    2. Hidden Markov Models, Extended Kalman Filter, Unscented Kalman Filter and Cubature Kalman Filter
    3. Other Filters: Information Filter, Square root Filter, H infinity filter
    4. Particle Filter: Non parametric probability representation; SIR and SIS
  • Hierarchical representations and Switching models
    1. Hierarchical DBNs: including discrete and continuous variables in DBN slice hierarchy
    2. Switching models: hierarchical feature representation Data Fusion inference and data equivalence with HDBNs
    3. Markov Jump Particle Filter Rao Blackwellized Particle filter
  • Generative models: representation and inference
    1. HDBN with continuous switching variables.
    2.  Generalized coordinates and generalized filtering
    3. Generalized filtering: free energy minimization as learning paradigm
  • Machine learning for HDBNs
    1. Learning generative models from multisensory sequences
    2. Unsupervised Clustering and HDBN learning
    3. Self organizing Map,
    4. Growing Neural Gas and ITM
    5. Learning conditional probabilities:
      1. parameter learning,
      2. HMM and KF learning methods (EM, Baum Welch, etc.)
      3. Gaussian processes.
      4. Dirichlet process
      5. ELBO variational approach
  • Incremental learning of switching generative models.
    1. Generalized DBNs as result of agent’s self poietic dynamic stability control.
    2. Abnormality detection methods for loss of stability detection: probabilistic distances
      1. Bhattacharrya,
      2. Hellinger
      3.  Mahalanobis
      4. Kullback Liebler.
    3. Null force filter, abnormality detection and generalized errors
    4. Learning new generative models using generalized errors.
  • Application and integration of course concepts by multisensory dataset processing. Assisted Laboratory experiences and report preparation
    1. Introduction to Matlab
    2. Bayesian Networks
    3. Kalman Filter
    4. Particle Filter
    5. Hidden Markov Models
    6. Markov Jump Particle Filter
    7. Generalized Filtering
    8. Unsupervised Clustering
    9. Markov Jump Particle Filter and anomaly detection
    10. Integration of methods for incremental learning
    11. Report presentation and  discussion

TESTI/BIBLIOGRAFIA

 Slides of all lectures written  by the lecturer will be made available

Books and research papers that can help the student to integrate concepts described during frontal activity are here provided and can be integrated during the year.  

- A. R. Damasio, Looking for Spinoza: Joy, Sorrow, and the Feeling Brain, 1st ed. Orlando: Harcourt, 2003. [Online]. Available:http://lccn.loc.gov/2002011347
- S. Haykin, Cognitive Dynamic Systems: Perception-action Cycle, Radar and Radio, ser. Cognitive Dynamic Systems: Perception–action Cycle, Radar, and Radio. Cambridge University Press, 2012.

- P. R. Lewis, M. Platzner, B. Rinner, J. Torresen, and X. Yao, Eds., Selfaware Computing Systems: An Engineering Approach. Springer, 2016.

- K. J. Friston, B. Sengupta, and G. Auletta, “Cognitive dynamics: From attractors to active inference,” Proceedings of the IEEE, vol. 102, no. 4, pp. 427–445, 2014. [Online]. Available:
https://doi.org/10.1109/JPROC.2014.2306251

- S. Haykin and J. M. Fuster, “On cognitive dynamic systems: Cognitive neuroscience and engineering learning from each other,” Proceedings of the IEEE, vol. 102, no. 3, pp. 608–628, 2014.

DOCENTI E COMMISSIONI

LEZIONI

MODALITA' DIDATTICHE

The course is divided in two parts. Lectures in frontal teaching modality presented together with slides will aim at describing the theroretical concepts and the techniques. Such lectires will cover 40 hours and can be recorded and made available on those channels recommended by Univeristy of Genova. The second part is done within a laboratory carried on by an expert of the field and will involve application of programs in Matlab framework that correspond to theories and techniqeus shon at lectures. Students will be required to present a report at the end of each lab experience. 10 Lab experiences are planned and will help students to be prepared to present the final report to be discussed during the exam that will show application and discussion of techniques abnd results over a dataset assigned.. 

Orari delle lezioni

L'orario di tutti gli insegnamenti è consultabile su EasyAcademy.

ESAMI

MODALITA' D'ESAME

L'esame si compone di una parte scritta e di una parte orale

La parte scritta consiste nella presentazione di un report o di un poster che descrivano le attività svolte dallo studente per dimostrare le conoscenze e le capacità che ha acquisito in lezioni e laboratori. Il report viene presentato qualora lo studente scelga di elaborare un data set assegnato alla fine del corso con le tecniche apprese nel laboratorio, Il dataset viene assegnato su richiesta dello studente almeno tre settimane prima della prova orale.  Alternativamente, il poster o un report possono essereproposti dallo studente se sceglie di selezionare autonomomamente un caso di studio o un dataset concordato con il docente. In tal caso l'eleborato dovrà provare in modo analogo che lo studente ha acquisito capacità e conoscenze analoghe a quelle del caso precedente. In enrìtrambi i casi l'eleborato deve essere consegnato almeno 4 giorni prima della data stabilita a calendario dell'esame orale. L'esito dell'esame scritto e l'ammissione all'esame orale viene comunicato il giorno prima dell'esame orale.   

La parte orale consiste nella discussione dell'eleborato scritto. Lo studente deve preparare un numero massimo di 20 slide per descrivere i risultati presentati nell'eleborato. La discussione è orientata a dimostrare la capacità dello studente nel descrivere le scelte che ha operato nella estensione dell'eleborato e che sono basate sulla conoscenza di teorie e tecniche viste nel corso oltre cha a commentare i risultati descitti nell'eleborato.    

Il superamento della prova orale presuppone l'ammissione ad essa sulla base di un punteggio della prova orale pari ad almeno 12 su 20. La prova orale si considera superata se lo studente ottiene almeno un punteggio di 6 su 10. La eventuale lode viene attribuita in sede di orale  

MODALITA' DI ACCERTAMENTO

 L'esame si prefigge di accertare i seguenti aspetti della preparazione dello studente:
Conoscenze acquisite circa le teorie e le tecniche presentate nelle lezioni del corso
Capacità di applicarle in modo integrato relativamente al problema di analisi dei dati (dataset) o di progettazione del sistema di analisi dei dati (caso di studio) selezionato per la prova scritta
Capacità di motivare le scelte effettuate nella stesura dell'elaborato sull base di conoscenze teoriche e caratteristiche delle tecniche apprese e sperimentate durante i laboratori, commentare i risultati ottenuti durante la discussione orale  

Calendario appelli

Data Ora Luogo Tipologia Note
13/01/2022 10:15 GENOVA Orale
27/01/2022 10:15 GENOVA Orale
10/02/2022 10:15 GENOVA Orale
09/06/2022 10:15 GENOVA Orale
23/06/2022 10:15 GENOVA Orale
14/07/2022 10:15 GENOVA Orale
28/07/2022 10:15 GENOVA Orale
25/08/2022 10:15 GENOVA Orale
15/09/2022 10:15 GENOVA Orale