Download - workshop Rfidvislab_r2b

Transcript
Page 1: workshop Rfidvislab_r2b

WORKSHOP

Localizzazione ed identificazione video/radio intelligente

1.  Percezione per robotica mobile 2.  Tecniche di localizzazione e identificazione di persone

3.  Smart People Surveillance

Relatore: Massimo Bertozzi - Laboratorio RFID&VIS-LABS

Page 2: workshop Rfidvislab_r2b

Introduzione

  Chi siamo   Introduzione alla percezione in robotica mobile   Problemi della robotica mobile   Campi applicativi

  Industriale   Agricolo   Automobilistico

  Due casi di studio   BRAiVE   VIAC

2

Page 3: workshop Rfidvislab_r2b

Chi Siamo

  Il Centro Interdipartimentale RFID&VISLabs nasce nell’ambito della rete Alta Tecnologia della Regione Emilia Romagna   VisLab   RFIDLab

  Esperienza pluriennale nell’ambito della robotica mobile   Visione artificiale   Percezione   Fusione sensoriale   Campo automobilistico ma non solo

3

Page 4: workshop Rfidvislab_r2b

Precedenti esperienze 4

Page 5: workshop Rfidvislab_r2b

Precedenti esperienze 5

Page 6: workshop Rfidvislab_r2b

Precedenti esperienze 6

Page 7: workshop Rfidvislab_r2b

Precedenti esperienze 7

Page 8: workshop Rfidvislab_r2b

Precedenti esperienze 8

Page 9: workshop Rfidvislab_r2b

Precedenti esperienze 9

Page 10: workshop Rfidvislab_r2b

Precedenti esperienze 10

Page 11: workshop Rfidvislab_r2b

Percezione in robotica mobile

  Sensori utilizzati principalmente   Telecamere   Laserscanner (radar)   Sensori inerziali   (GPS)

  Fusione sensoriale

11

Page 12: workshop Rfidvislab_r2b

Percezione in robotica mobile

  Visione come strumento principe   Vantaggi:

  Costo   Sensore passivo   Non ci sono parti in movimento   Facilmente integrabile   Sovrapponibile alla percezione umana   Ampio angolo di osservazione

  Svantaggi   Misura non diretta   Non sempre estende percezione guidatore

  Fusione sensoriale

12

Page 13: workshop Rfidvislab_r2b

Problematiche della percezione «mobile»

  Alcune differenze rispetto alla percezione «fissa»   Installazione   Cablaggio   Controllo Illuminazione   Ego motion   Oscillazione e vibrazioni

13

Page 14: workshop Rfidvislab_r2b

Installazione

  Problematiche:   Dimensioni sensori

 Non sempre compatibili con veicolo  Influenzano scelta elaborazione

  Parti in movimento  Laserscanner

  Visibilita’  Tipica telecamere

–  FIR –  SWIR

  Protezione

14

Page 15: workshop Rfidvislab_r2b

Cablaggio

  Due problemi distinti   Comunicazione

 Alcuni standard gia’ operativi –  ISOBus –  CAN

 Problema throughput –  CAN 1 Mbs

  Cablaggio fisico  Costi  Guasto

  Scelte possibili   CAN   Firewire & USB   LVDS

15

Page 16: workshop Rfidvislab_r2b

Controllo illuminazione

  Spesso non possibile controllare illuminazione   Illuminazione non artificiale   Orientazione sensore cambia

 Anche velocemente   Altre fonti di illuminazione

 Altri veicoli

  Non solo robotica «mobile»   Visione outdoor vs indoor

  Non sempre vero per «indoor»   Altri problemi:

  Riflessi   Illuminatori specifici (NIR)

16

Page 17: workshop Rfidvislab_r2b

Ego motion

  Il veicolo si muove rispetto al mondo   Tutto si muove!

  Impatto su sensori che «scandiscono»   Telecamera «scansione elettronica»   Laserscanner «scansione meccanica»

  Effetti indesiderati   Visione: Blur

 interallacciamento   Laserscanner: disallineamento punti

17

Page 18: workshop Rfidvislab_r2b

Oscillazioni e vibrazioni

  Non solo il veicolo si muove   Movimenti singoli dei sensori

  Sorgente di rumore   Problemi di calibrazione

 intercalibrazione

  Soluzioni possibili:   Stabilizzazione   Calibrazione automatica

18

Page 19: workshop Rfidvislab_r2b

Campi applicativi

  Robotica industriale   Uno dei primi campi applicativi

 Magazzini automatizzati  Movimentazione merci

  Perche’  Sicurezza  Costi

  Prime soluzioni basate su strutturazione ambiente  Chiodi magnetici  Cavi  Linee guida

  Problemi:  Ambiente non statico  Altri veicoli o pedoni

  Soluzioni  Strutturare veicolo

19

Impossibile visualizzare l'immagine. La memoria del computer potrebbe essere insufficiente per aprire l'immagine oppure l'immagine potrebbe essere danneggiata. Riavviare il computer e aprire di nuovo il file. Se viene visualizzata di nuovo la x rossa, potrebbe essere necessario eliminare l'immagine e inserirla di nuovo.

Page 20: workshop Rfidvislab_r2b

Campi applicativi

  Settore agricolo   Ricaduta dal campo

automobilistico  Ambiente non strutturabile  Ambiente pero’ semplice

  Perche’  Sicurezza  Costi  Ottimizzazione funzioni  Orari

20

Impossibile visualizzare l'immagine. La memoria del computer potrebbe essere insufficiente per aprire l'immagine oppure l'immagine potrebbe essere danneggiata. Riavviare il computer e aprire di nuovo il file. Se viene visualizzata di nuovo la x rossa, potrebbe essere necessario eliminare l'immagine e inserirla di nuovo.

Page 21: workshop Rfidvislab_r2b

Campi applicativi

  Settore automobilistico   Ambiente

 Complesso  Parzialmente strutturato  Vasto e vario

  Motivazioni  Sicurezza  Registrazione  Obblighi legali e assicurativi

21

Page 22: workshop Rfidvislab_r2b

Caso di studio: BRAiVE

Impossibile visualizzare l'immagine. La memoria del computer potrebbe essere insufficiente per aprire l'immagine oppure l'immagine potrebbe essere danneggiata. Riavviare il computer e aprire di nuovo il file. Se viene visualizzata di nuovo la x rossa, potrebbe essere necessario eliminare l'immagine e inserirla di nuovo.

22

Page 23: workshop Rfidvislab_r2b

BRAiVE: funzioni 23

Page 24: workshop Rfidvislab_r2b

BRAiVE: test 24

Page 25: workshop Rfidvislab_r2b

VisLab Autonomous Intercontinental Challenge 25

  13,000 km in:   Ambiente non controllato e   Per molto tempo

  Su due continenti (differenti morfologie geografiche, traffico, clima, infrastrutture)

… con piccoli veicoli elettrici

Page 26: workshop Rfidvislab_r2b

VIAC: requisiti

  Non e’ possibile fare ipotesi su:   Struttura strade   Comportamento altri veicoli e pedoni   Disponibilita’ mappe e informazioni GPS

  Non si puo’ provare prima

  Occorre essere preparati per tutto!

26

Page 27: workshop Rfidvislab_r2b

VIAC: i veicoli

  4 veicoli   7 telecamere   4 laserscanner   GPS   V2V radio

+ altri dispositivi

  3 PC

27

Page 28: workshop Rfidvislab_r2b

VIAC la spedizione

  2 veicoli in funzione   2 veicoli di backup

28

Page 29: workshop Rfidvislab_r2b

VIAC: veicoli di supporto

  4 camper   2 camion   1 bisarca   Circa 20 persone

29

Page 30: workshop Rfidvislab_r2b
Page 31: workshop Rfidvislab_r2b

VIAC: cosa abbiamo imparato

  Era un test   Sviluppo continuo   Acquisizione dati

 Circa 50 Tbyte di dati sincronizzati!

  Necessario correggere manualmente in alcune situazioni   Problemi climatici   Problemi relativi all’informazione disponibile   Traffico caotico

Necessario adattarsi ad usi e costumi!

31

Page 32: workshop Rfidvislab_r2b
Page 33: workshop Rfidvislab_r2b
Page 34: workshop Rfidvislab_r2b
Page 35: workshop Rfidvislab_r2b
Page 36: workshop Rfidvislab_r2b
Page 37: workshop Rfidvislab_r2b
Page 38: workshop Rfidvislab_r2b
Page 39: workshop Rfidvislab_r2b
Page 40: workshop Rfidvislab_r2b
Page 41: workshop Rfidvislab_r2b
Page 42: workshop Rfidvislab_r2b
Page 43: workshop Rfidvislab_r2b
Page 44: workshop Rfidvislab_r2b
Page 45: workshop Rfidvislab_r2b
Page 46: workshop Rfidvislab_r2b
Page 47: workshop Rfidvislab_r2b
Page 48: workshop Rfidvislab_r2b
Page 49: workshop Rfidvislab_r2b
Page 50: workshop Rfidvislab_r2b

Partners 50

Page 51: workshop Rfidvislab_r2b

WORKSHOP

Localizzazione ed identificazione video/radio intelligente

1.  Percezione per robotica mobile 2.  Tecniche di localizzazione e identificazione di persone

3.  Smart People Surveillance

Relatore: Massimo Bertozzi - Laboratorio RFID&VIS-LABS