Come i migliori ricercatori portano le aziende internazionali in Svizzera

Gli occhiali per la realtà mista, come gli HoloLens, lo rendono possibile. Sono dotati di vari sensori e telecamere, ad esempio per tracciare i movimenti degli occhi e riconoscere gesti, oggetti e parole. Inoltre, gli ambienti vengono ripresi in tre dimensioni per poter calcolare la posizione e l'ubicazione degli oggetti in questi ambienti. Questa è la base per la creazione di oggetti digitali 3D negli HoloLens.

Questi occhiali possono essere utilizzati, ad esempio, per visualizzare gli schemi dei circuiti o il piano di costruzione digitale di un oggetto o di un edificio direttamente sul posto. "Sovrapponendo il piano virtuale alla realtà, i compiti possono essere completati senza dover guardare prima un piano", spiega Pollefeys. La realtà mista può anche aiutare a formare il personale medico per operazioni delicate. Oppure può consentire ai robot di svolgere compiti pericolosi, in quanto possono essere controllati a distanza con gli HoloLens utilizzando semplici gesti della mano.

Istruzioni in tempo reale

Sullo sfondo dell'automazione, dell'Internet delle cose (IoT) e della generale carenza di manodopera qualificata, l'industria fa affidamento su nuove soluzioni, afferma Pollefeys: "Abbiamo bisogno di collaboratori più flessibili e in grado di svolgere molti compiti diversi".

Manipolazioni errate, applicazioni non corrette o errori di manutenzione possono costare caro a un'azienda ed essere pericolosi per i collaboratori. Con la realtà mista, gli utenti ricevono informazioni digitali pertinenti al momento giusto e nel giusto contesto. Ad esempio, se uno specialista si trova di fronte a un macchinario, frecce e altri simboli possono guidarlo passo dopo passo in un compito difficile o nuovo. Oppure può conoscere i dati sullo stato della macchina in tempo reale grazie alla sovrapposizione di sensori IoT. A differenza della realtà virtuale, in cui si è completamente immersi in un mondo creato artificialmente, con la realtà mista l'ambiente reale rimane visibile mentre gli ologrammi 3D vengono sovrapposti al campo visivo dell'utente.

Ricerca, insegnamento e applicazione

In qualità di direttore del Mixed Reality & AI Zurich Lab e di responsabile della ricerca di Microsoft, Pollefeys guida un team di 25 scienziati e ingegneri in Svizzera. C'è anche un collaboratore a Praga e altri 15 presso la sede centrale di Redmond (USA). "Sono orgoglioso di essere riuscito a costruire un team ben amalgamato con competenze di prim'ordine e grandi talenti", afferma Pollefeys. "? quello di cui abbiamo bisogno, perché stiamo lavorando su una tecnologia pionieristica di cui non sappiamo ancora esattamente di cosa abbiamo bisogno e come dobbiamo costruirla". La tecnologia si sta sviluppando rapidamente e richiede una grande flessibilità da parte del suo team.

Pollefeys lavora per il 50% presso l'ETH e per il 50% presso Microsoft. Lavora, fa insegnamento e ricerca - suddivisi in mezze giornate e giornate individuali - in due sedi diverse e cambia ogni volta ufficio. "Questo rende l'organizzazione dei vari compiti più facile e strutturata per me".

Se la ricerca di soluzioni per una specifica applicazione di realtà mista è complicata, ci lavora solo con i collaboratori di Microsoft, dice Pollefeys. Tuttavia, una rigida separazione tra scuola universitaria e azienda tecnologica ha poco senso nella maggior parte dei casi: "Se si tratta di un problema di principio che richiede una soluzione generale e ha il carattere della ricerca fondamentale, allora lavoriamo insieme a l'ETH e a Microsoft".

A volte l'informatico incontra un problema durante il suo lavoro alla Microsoft, che poi integra pienamente nell'insegnamento e nella ricerca all'ETH. "Questo di solito è molto eccitante per gli studenti - e motivante, perché sanno che si tratta di un problema reale dalla pratica".

Sia nell'ambito del suo lavoro presso Microsoft che presso l'ETH di Zurigo, i risultati di ricerca vengono pubblicati e i codici vengono condivisi ogni volta che è possibile. Pollefeys sottolinea che collabora anche con altre aziende. "Come ricercatore, per me è importante mantenere un terreno neutrale". Ad esempio, la sua cattedra ha prodotto un algoritmo chiave che è servito come base per la funzione di navigazione Google Live View, oggi utilizzata in tutto il mondo.

Una situazione vantaggiosa per tutti

Collaborando con l'ETH, Microsoft ottiene un approfondimento nel campo della ricerca e può quindi generare maggiore innovazione. Pollefeys spiega che in un team di prodotto aziendale ci si muove in circoli ristretti e si ha poco tempo per sperimentare cose nuove. La collaborazione con l'ETH aiuta Microsoft a trovare nuovi approcci e soluzioni.

Lo conferma Marc Holitscher, National Technology Officer di Microsoft Svizzera. "La nostra collaborazione con l'ETH, e con Marc Pollefeys in particolare, ha già portato a risultati eccezionali che spingono l'innovazione in vari settori e contribuiscono alla posizione della Svizzera come leader tecnologico globale", afferma Holitscher. "Insieme, continueremo a spingerci oltre i confini del possibile e a utilizzare la ricerca di punta, il talento e la tecnologia per affrontare alcune delle sfide più urgenti del mondo."

Pollefeys sottolinea che la collaborazione con l'industria è vantaggiosa anche per l'insegnamento universitario: "Sia gli ingegneri di Microsoft che noi professori portiamo agli studenti problemi e idee attuali, offrendo loro interessanti opportunità di lavoro, ma anche la possibilità di sperimentare idee e conoscere nuove tecnologie applicate."

La collaborazione tra la scuola universitaria e il gruppo tecnologico internazionale è una situazione vantaggiosa per tutte le parti: "Lavorare insieme agli studenti su una questione, permettendo loro di ricercare come una nuova tecnologia potrebbe essere utilizzata per un problema specifico, è interessante sia per gli studenti che per gli sviluppatori del prodotto. Inoltre, gli studenti sono seguiti da un esperto che ha una grande conoscenza ed esperienza del prodotto e sa perché un determinato passo potrebbe essere rilevante".

Anche l'ETH trae vantaggio quando i professori hanno una conoscenza di base e una comprensione del settore, sottolinea Pollefeys. "Il mio lavoro in Microsoft mi dà una visione preziosa del processo decisionale e del funzionamento dei processi in una grande azienda. Questo aiuta a vedere l'intero sviluppo tecnologico in un contesto più ampio".

Infine, i progetti comuni servono anche a promuovere il networking all'interno dell'ETH, proprio come Pollefeys aveva previsto quando ha assunto la cattedra a Zurigo. Attualmente sta lavorando con il suo collaboratore Siyu Tang a un nuovo metodo per generare dati utilizzando avatar autonomi. "Montando gli HoloLens su queste figure virtuali, possiamo ottenere i dati di cui abbiamo bisogno per addestrare e testare gli algoritmi molto più facilmente che se dovessimo camminare e misurare noi stessi le stanze con gli HoloLens".