Omniverse Avatar collega le tecnologie dell'azienda in intelligenza artificiale vocale, visione artificiale, comprensione del linguaggio naturale, motori di raccomandazione e tecnologie di simulazione.
Gli avatar creati nella piattaforma sono personaggi interattivi con grafica 3D ray-tracing che possono vedere, parlare, conversare su un'ampia gamma di argomenti e comprendere l'intento parlato in modo naturale.
Omniverse Avatar apre le porte alla creazione di assistenti AI facilmente personalizzabili per qualsiasi settore.
Questi potrebbero aiutare con i miliardi di interazioni quotidiane del servizio clienti - ordini di ristoranti, transazioni bancarie, fissare appuntamenti e prenotazioni personali e altro - portando a maggiori opportunità di business e una migliore soddisfazione del cliente.
Omniverse Avatar combina la grafica di base, la simulazione e le tecnologie AI di NVIDIA per realizzare alcune delle applicazioni in tempo reale più complesse mai create.
I casi d'uso di robot collaborativi e assistenti virtuali sono incredibili e di vasta portata.
Omniverse Avatar fa parte di NVIDIA Omniverse™, una piattaforma di simulazione e collaborazione del mondo virtuale per flussi di lavoro 3D attualmente in open beta con oltre 70.000 utenti.
Nel suo discorso di apertura a NVIDIA GTC, Huang ha condiviso vari esempi di Omniverse Avatar: Project Tokkio per l'assistenza clienti, NVIDIA DRIVE Concierge per servizi intelligenti sempre attivi nei veicoli e Project Maxine per le videoconferenze.
Nella prima dimostrazione del Progetto Tokkio, Huang ha mostrato ai colleghi impegnati in una conversazione in tempo reale con un avatar creato come una replica giocattolo di se stesso, conversando su argomenti come la biologia e la scienza del clima.
In una seconda demo di Project Tokkio, ha evidenziato un avatar del servizio clienti in un chiosco di un ristorante, in grado di vedere, conversare e comprendere due clienti mentre ordinavano hamburger vegetariani, patatine fritte e bevande.
Le dimostrazioni sono state supportate dal software NVIDIA AI e Megatron 530B, che è attualmente il più grande modello di linguaggio personalizzabile al mondo.
In una demo della piattaforma AI DRIVE Concierge, un assistente digitale sullo schermo del cruscotto centrale aiuta il conducente a selezionare la migliore modalità di guida per raggiungere la sua destinazione in tempo, quindi segue la sua richiesta di impostare un promemoria una volta che l'autonomia dell'auto scende sotto i 100 miglia.
Separatamente, Huang ha mostrato la capacità di Project Maxine di aggiungere funzionalità video e audio all'avanguardia alle applicazioni di collaborazione virtuale e creazione di contenuti.
Un oratore di lingua inglese viene mostrato durante una videochiamata in un caffè rumoroso, ma può essere ascoltato chiaramente senza rumori di sottofondo. Mentre parla, le sue parole vengono trascritte e tradotte in tempo reale in tedesco, francese e spagnolo con la stessa voce e intonazione.
Elementi chiave dell'Avatar Omniverse
Omniverse Avatar utilizza elementi di intelligenza artificiale vocale, visione artificiale, comprensione del linguaggio naturale, motori di raccomandazione, animazione facciale e grafica forniti attraverso le seguenti tecnologie:
Il suo riconoscimento vocale si basa su NVIDIA Riva, un kit di sviluppo software che riconosce il parlato in più lingue.
Riva viene anche utilizzato per generare risposte vocali simili a quelle umane utilizzando le funzionalità di sintesi vocale.
La sua comprensione del linguaggio naturale si basa sul modello di linguaggio di grandi dimensioni Megatron 530B in grado di riconoscere, comprendere e generare il linguaggio umano.
Megatron 530B è un modello preaddestrato che può, con poca o nessuna formazione, completare frasi, rispondere a domande di un vasto dominio di argomenti, riassumere storie lunghe e complesse, tradurre in altre lingue e gestire molti domini che non è addestrato specificamente a fare.
Il suo motore di raccomandazione è fornito da NVIDIA Merlin™, un framework che consente alle aziende di creare sistemi di raccomandazione di deep learning in grado di gestire grandi quantità di dati per fornire suggerimenti più intelligenti.
Le sue capacità di percezione sono abilitate da NVIDIA Metropolis, un framework di visione artificiale per l'analisi video.
La sua animazione avatar è basata su NVIDIA Video2Face e Audio2Face™, animazione facciale 2D e 3D e tecnologie di rendering basate sull'intelligenza artificiale.
Queste tecnologie sono composte in un'applicazione ed elaborate in tempo reale utilizzando NVIDIA Unified Compute Framework.
Confezionate come microservizi scalabili e personalizzabili, le competenze possono essere distribuite, gestite e orchestrate in modo sicuro in più sedi da NVIDIA Fleet Command™.
INFO: www.nvidia.com
https://nvidianews.nvidia.com/
