Utilizzo di GMSL per le applicazioni di visione robotica ad alta larghezza di banda

La visione è fondamentale per la progettazione di applicazioni robotiche in grado di percepire e adattarsi al mondo fisico in tempo reale. I sistemi robotici operano in ambienti dinamici e spesso imprevedibili, dove i dati dei sensori devono essere acquisiti, trasmessi, elaborati e tradotti in azioni entro pochi millisecondi. Qualsiasi latenza aggiuntiva, perdita di dati o incoerenza temporale può compromettere le prestazioni e persino creare rischi per la sicurezza.

Questi vincoli diventano sempre più stringenti man mano che i sistemi robotici si orientano verso una percezione basata sull'apprendimento automatico che si basa su grandi volumi di dati visivi piuttosto che su una programmazione specifica per l'attività. Ciò assicura l'adattabilità delle applicazioni robotiche, permettendo loro di percepire nuovi oggetti, ambienti e attività con una riprogrammazione minima.

Queste tendenze esercitano una pressione crescente sulle modalità di trasporto dei dati visivi all'interno dei sistemi robotici. La tecnologia Gigabit Multimedia Serial Link (GMSL) può aiutare a risolvere le sfide progettuali semplificando la connettività dei sensori, riducendo la complessità del cablaggio e consentendo una trasmissione dati robusta e a bassa latenza tra telecamere distribuite e moduli di calcolo centralizzati.

Originariamente progettata per applicazioni automotive come i sistemi avanzati di assistenza alla guida (ADAS), la tecnologia GMSL è ampiamente utilizzata nella robotica e nei sistemi di visione artificiale per il collegamento di telecamere e sensori remoti con bassa latenza e robusta immunità alle interferenze elettromagnetiche.

Sviluppata da Analog Devices, Inc., GMSL è una tecnologia di comunicazione con serializzatore/deserializzatore (SerDes) ad alta velocità che consente la trasmissione di dati e video ad alta larghezza di banda su un singolo cavo coassiale o a doppino intrecciato. Invece di condividere una stessa infrastruttura di rete, ogni telecamera opera su un collegamento ad alta velocità dedicato, eliminando complessità quali la contesa, l'instradamento e la variabilità legata ai pacchetti. In questo modo si crea un percorso dati prevedibile in cui tempi e latenza rimangono costanti, anche con l'aumento del numero di sensori.

Un serializzatore GMSL prende gruppi di dati pixel che normalmente verrebbero trasmessi in parallelo su più linee di segnale e li converte in un flusso seriale continuo ad alta velocità. Sul lato processore, un deserializzatore lo converte nuovamente nel suo formato originale. Poiché ciascuna telecamera dispone di un proprio collegamento punto-punto, la larghezza di banda cresce in modo lineare con il numero di telecamere senza introdurre problemi di contesa della rete, di sovraccarico di commutazione o di ritardi nella programmazione dei pacchetti.

I vantaggi di questo approccio sono più evidenti man mano che i sistemi di visione si espandono a più telecamere ad alta risoluzione. A differenza delle applicazioni a telecamera singola, questi sistemi richiedono una copertura visiva densa e sincronizzata per supportare attività quali la navigazione, la manipolazione e la comprensione della scena in tempo reale. Con l'aumentare del numero di sensori, aumenta anche il carico sulla larghezza di banda, sul cablaggio e sulla precisione della temporizzazione, rivelando i limiti delle tradizionali interconnessioni a livello di scheda a corto raggio.

Gli approcci convenzionali, come l'USB, l'Ethernet standard o i collegamenti MIPI diretti a livello di scheda, comportano compromessi in termini di latenza, sincronizzazione o portata fisica. Il risultato è una sfida di integrazione crescente, in quanto un maggior numero di telecamere aumenta la complessità relativa al cablaggio, alla gestione della temporizzazione e alla progettazione del sistema.

Rispetto ad altri approcci alla connettività della visione, la tecnologia GMSL offre diversi vantaggi distinti:

• Si estende oltre MIPI CSI-2 in termini di portata e robustezza, pur mantenendo un'architettura punto-punto semplice a bassa latenza che evita la complessità degli stack di visione basati su Ethernet.
• GMSL privilegia la connettività punto-punto deterministica e la più semplice sincronizzazione multitelecamera rispetto alla flessibilità della rete distribuita su larga scala della tecnologia Ethernet.
• Le prestazioni sono sostanzialmente paragonabili a quelle di FPD-Link, un'altra opzione SerDes proprietaria; la scelta tra i due approcci è spesso dettata da considerazioni relative all'ecosistema.

La tecnologia GMSL è in grado di bilanciare i sistemi di visione embedded e in rete, fornendo un approccio pratico alla connettività delle telecamere ad alta velocità con prestazioni deterministiche e a bassa latenza. Questo semplifica la connettività della visione ad alta velocità, pur mantenendo i severi requisiti di latenza e affidabilità dei sistemi robotici in tempo reale.

Alta velocità, alto volume

Questi vantaggi architetturali sono fondamentali in quanto la risoluzione delle telecamere e il numero di sensori continuano a crescere. La tecnologia GMSL è in grado di spostare grandi quantità di dati, in particolare video, su un unico cavo e da più telecamere o altri sensori. Utilizza un collegamento punto-punto dedicato senza contesa di rete o instradamento dei pacchetti. Invece di utilizzare connessioni multiple per ciascun punto, i progettisti possono utilizzare il GMSL per trasportare flussi ad alta larghezza di banda su cavi coassiali o a doppino intrecciato, mantenendo bassa latenza e forte resistenza al rumore.

La tecnologia ha semplificato il cablaggio automotive e migliorato la robustezza, e queste stesse caratteristiche si traducono direttamente nella robotica: il minor numero di cavi semplifica la progettazione elettrica e meccanica, dando vita a sistemi più leggeri e affidabili e a un assemblaggio più semplice. Le telecamere distribuite possono essere posizionate lontano dal modulo di calcolo, collegate con un cablaggio minimo e fornire comunque in modo affidabile dati sincronizzati a bassa latenza che supportano la percezione e il processo decisionale in tempo reale.

I robot si affidano sempre più spesso a telecamere multiple ad alta risoluzione, talvolta combinate con sensori di profondità o LiDAR (rilevamento e telemetria tramite onde luminose), per comprendere l'ambiente circostante (Figura 1). Ogni telecamera da sola può generare un grande flusso di dati e quando se ne usano diverse insieme, i requisiti in termini di larghezza di banda possono essere giganteschi. Una telecamera con risoluzione 1080p a 30 fps con 24 bit per pixel genera 1,4 Gbps, che diventano 5,6 Gbps per quattro telecamere e 8,4 Gbps per sei telecamere. Le applicazioni a risoluzione e frequenza di fotogrammi superiori aumentano i requisiti di larghezza di banda fino all'ordine delle decine di gigabit al secondo.

Figura 1: Illustrazione di un sistema di visione robotica multimodale con GMSL, in grado di elaborare dati di immagine provenienti da più telecamere e altri sensori per consentire la percezione robotica. (Immagine per gentile concessione di Analog Devices, Inc.)

Per supportare questo volume di dati in modo affidabile, è necessaria un'architettura di trasporto che si adatti in modo prevedibile senza introdurre incertezze di temporizzazione. I collegamenti deterministici e a bassa latenza di GMSL garantiscono il mantenimento della sincronizzazione di più telecamere e la trasmissione di dati in modo prevedibile, consentendo lo sviluppo di applicazioni con percezione multitelecamera senza sovraccaricare il sistema o introdurre incertezze di temporizzazione.

Considerazioni pratiche

Con le aziende che si orientano sempre più verso piattaforme versatili in grado di percepire, manipolare e prendere decisioni autonome, i sistemi robotici stanno progredendo rapidamente. I robot umanoidi come Optimus di Tesla dipendono da reti di telecamere in tempo reale con più flussi video sincronizzati ad alta risoluzione per navigare e interagire con ambienti complessi.

La visione robotica utilizza sempre più spesso array di sensori distribuiti per la navigazione e la manipolazione in tempo reale, richiedendo una stretta sincronizzazione e una connettività affidabile. Con l'aumento delle esigenze di rilevamento, le applicazioni devono aumentare il numero di sensori e la risoluzione senza gravare sulle risorse di calcolo o causare problemi di temporizzazione. Questi requisiti vengono implementati attraverso dispositivi edge e di aggregazione che collegano sensori di immagine e piattaforme di calcolo per la gestione di dati sincronizzati a bassa latenza, essenziali per l'autonomia.

Ai margini del sistema, dispositivi quali il serializzatore GMSL2 MAX96717 di ADI fungono da interfaccia tra i sensori di immagine e il collegamento di trasporto (Figura 2). Posizionato direttamente dietro la telecamera, questo dispositivo acquisisce i dati della telecamera MIPI CSI-2 ad alta larghezza di banda e li converte in un collegamento serializzato ad alta velocità per la trasmissione su cavi di tipo automotive per lunga distanza. Il dispositivo supporta velocità dati di collegamento di andata di 3 Gbps o 6 Gbps, con un canale di controllo inverso a 187,5 Mbps, e accetta fino a quattro canali MIPI CSI-2 a 2,5 Gbps per canale.

Figura 2: In questo schema, quattro dispositivi MAX96717 convertono i flussi di dati paralleli provenienti da sensori di telecamere separati in un segnale serializzato che viene trasmesso su un collegamento GMSL2 al deserializzatore MAX96724, che lo aggrega e lo converte in MIPI CSI-2 per fornire dati di immagine aggregati e sincronizzati a un processore centrale. (Immagine per gentile concessione di Analog Devices, Inc.)

Il serializzatore gestisce la formattazione e la trasmissione in tempo reale dell'output grezzo delle telecamere in un collegamento GMSL2 a lunga distanza, preservando l'integrità dei fotogrammi, la segnalazione di controllo e i metadati di sincronizzazione. Trasforma un sensore di immagine strettamente accoppiato in un nodo di rilevamento remoto che può essere collocato in qualsiasi punto del robot, consentendo di distribuire più telecamere su una piattaforma robotica senza il vincolo delle interconnessioni a corto raggio.

Sul lato ricevente, un deserializzatore GMSL2 multicollegamento come MAX96724 di ADI aggrega più flussi di telecamere remote in un unico hub di interfaccia sincronizzato. Il dispositivo consente la percezione multitelecamera scalabile senza aumentare la complessità del sistema e aggrega più flussi di telecamere GMSL2 (fino a quattro collegamenti a 3 o 6 Gbps) in un'unica interfaccia MIPI CSI-2 per il processore host, mantenendo al contempo la temporizzazione sincronizzata e il controllo bidirezionale tra i sensori.

Una volta deserializzati, i dati delle telecamere vengono forniti al processore host come flussi di immagini standard, in genere tramite l'interfaccia MIPI CSI-2. Da qui, i fotogrammi provenienti da più telecamere vengono ingeriti in parallelo dallo stack di visione del sistema, che può includere l'elaborazione ISP, la logica di sincronizzazione e i modelli di inferenza IA per attività quali il rilevamento degli oggetti, la stima della profondità, il tracciamento e la comprensione della scena.

Poiché i flussi GMSL arrivano con una temporizzazione coerente, le applicazioni possono fondere in modo affidabile i dati tra le diverse telecamere e con altri sensori come LiDAR o unità di misurazione inerziale (IMU) che monitorano il movimento e l'orientamento, dotando il robot di una comprensione coerente e in tempo reale del suo ambiente. Per lo sviluppo e la convalida, è possibile implementare una catena di segnali completa utilizzando piattaforme di valutazione che accoppiano moduli telecamera lato serializzatore con piattaforme di valutazione deserializzatore come MAX96724-BAK-EVK# (Figura 3), consentendo agli sviluppatori di testare la sincronizzazione multitelecamera, le prestazioni in termini di larghezza di banda e l'integrazione del processore prima di passare a progetti hardware personalizzati.

Figura 3: La piattaforma di valutazione MAX96724-BAK-EVK# fornisce un riferimento di sviluppo per i sistemi di visione robotica, aggregando più flussi di telecamere GMSL2 da serializzatori quali MAX96717 e fornendo un'uscita MIPI CSI-2 sincronizzata a un processore centralizzato. (Immagine per gentile concessione di Analog Devices, Inc.)

Tecnologia ed ecosistema maturi

La tecnologia GMSL si è evoluta attraverso diverse generazioni, ognuna delle quali ha ampliato la larghezza di banda, la portata e la flessibilità del sistema, pur mantenendo la stessa architettura fondamentale basata su SerDes:

• GMSL1 ha introdotto una robusta soluzione di grado automotive per la trasmissione di video ad alta velocità su lunghe distanze, supportando principalmente sistemi di telecamere di classe HD.
• GMSL2 ha aumentato in modo significativo la larghezza di banda e la scalabilità, consentendo sistemi multitelecamera a 1080p e 4K con una sincronizzazione più stretta, una latenza inferiore e un'aggregazione multiflusso più efficiente, diventando così la generazione dominante nelle piattaforme robotiche e nei sistemi ADAS moderni.
• GMSL3 si basa su queste fondamenta, apportando ulteriori miglioramenti in termini di velocità dati, flessibilità del sistema e supporto per sensori ad alta risoluzione di prossima generazione e architetture multisensore sempre più complesse.

La tecnologia GMSL è sostenuta da un ecosistema maturo che supporta implementazioni scalabili e pronte per la produzione. Gli sviluppatori di robotica possono usufruire di una serie completa di componenti convalidati progettati per il funzionamento affidabile in condizioni reali, come telecamere, moduli di calcolo, cavi, connettori e supporto software/driver. Questo ecosistema riduce la complessità dell'integrazione, abbrevia i cicli di sviluppo e abbassa la barriera per il passaggio dai primi prototipi ai sistemi di produzione.

Conclusione

Con l'evoluzione dei sistemi robotici verso una maggiore densità di sensori e un'autonomia in tempo reale, le architetture di connettività devono consentire la scalabilità senza compromettere il determinismo o l'affidabilità. Semplificando il cablaggio, preservando la temporizzazione deterministica e consentendo il posizionamento distribuito dei sensori, le architetture basate su GMSL consentono ai progettisti di applicazioni robotiche di aumentare la capacità di percezione senza dover riprogettare radicalmente il modello di calcolo o di sincronizzazione. Ciò rappresenta un elemento fondamentale nella transizione verso sistemi di visione robotica ad alta densità in tempo reale.