Nvidia’s Global GTC 2021 loopt van 8-11 november. Een evenement dat wereldwijd werd bezocht en werd bijgewoond door meer dan 200.000 organisatoren, ontwikkelaars, innovators, onderzoekers en makers. Over programma’s: deep learning, datawetenschap, high-performance computing, robotica, netwerkdatacenters en graphics. Tijdens de openingskeynote deed CEO en oprichter Jensen Huang enkele grote aankondigingen, vooral met betrekking tot het Omniverse- en digital twins-programma.

Augmented Reality, Virtual Reality en Multi-GPU in het hart van het Omniversum

Sinds de lancering in open bèta in december, is deze multi-software 3D-samenwerkingsoplossing meer dan 70.000 keer gedownload. Het wordt gebruikt door professionals bij meer dan 700 bedrijven, waaronder de BMW Group, Cannon Design, Epigraph, Ericsson, architectenbureaus HKS en KPF, Lockheed Martin en Sony Pictures Animation.

Nieuwe functies die deze week door NVIDIA voor het Omniversum zijn uitgerold, zijn onder meer:

• Universum-avatar, een technologieplatform dat NVIDIA-technologieën op het gebied van stem-AI, computervisie, begrip van natuurlijke taal, aanbevelingsengines en simulatietechnologieën verbindt om interactieve AI-avatars te genereren. De avatars die op het platform zijn gemaakt, zijn interactieve personages met 3D-raytraced-graphics die op natuurlijke wijze kunnen zien, praten en praten over verschillende onderwerpen en de gesproken bedoeling begrijpen. Jensen Huang zegt:
  

  “De dageraad van de intelligente virtuele assistent is aangebroken. Omniverse Avatar combineert NVIDIA-kerngraphics, simulatie en AI-technologie om enkele van de meest complexe realtime-applicaties te creëren die ooit zijn gemaakt. De use cases voor collaboratieve robots en virtuele assistenten zijn buitengewoon en verstrekkend.”

• Omniversum Replicator, een krachtige engine voor het genereren van synthetische gegevens die fysiek gesimuleerde synthetische gegevens genereert om diepe neurale netwerken te trainen. In de eerste implementatie van de engine demonstreerde het bedrijf twee toepassingen voor het genereren van synthetische gegevens: een voor NVIDIA DRIVE Sim™, een virtuele wereld om de digitale tweeling van een autonoom voertuig te huisvesten, en een andere voor NVIDIA Isaac Sim™, een virtuele wereld voor de digitale tweeling van een manipulatieve robot. DRIVE Sim is een simulatietool die bovenop het Omniversum is gebouwd en die profiteert van veel van de functies van het platform. De gegevens die door de DRIVE Sim worden gegenereerd, worden gebruikt om de diepe neurale netwerken te trainen die het autonome voertuigperceptiesysteem vormen. Voor het NVIDIA DRIVE-team zijn synthetische gegevens een belangrijk en efficiënt onderdeel geworden van hun AV-ontwikkelingsworkflow. Het diepe neurale netwerk dat de perceptie van autonome voertuigen aanstuurt, bestaat uit twee delen: het algoritmische model en de gegevens die worden gebruikt om dat model te trainen. Met synthetische gegevensgeneratie hebben ontwikkelaars meer controle over de ontwikkeling van de gegevens en passen ze deze aan de specifieke behoeften van het model aan.

Het Omniverse biedt ook verschillende nieuwe functies, waaronder:

• NVIDIA CloudXR, een meeslepend streamingframework op enterprise-niveau, is geïntegreerd in de Omniverse-kit (een apparaat voor het bouwen van native Omniverse-micro-applicaties en -services) waarmee gebruikers Omniverse-ervaringen interactief kunnen streamen naar hun mobiele AR- en VR-apparaten.
• VR Universum stelt ontwikkelaars in staat hun eigen VR-tools op het platform te bouwen en eindgebruikers direct te profiteren van VR-mogelijkheden.
• Remote XR Omniversum biedt augmented reality-mogelijkheden en virtuele camera’s, waardoor ontwerpers hun volledig ray-traced assets kunnen bekijken via iOS- en Android-apparaten.
• Omniversum boerderij stelt teams in staat om meerdere werkstations of servers samen te gebruiken om taken uit te voeren zoals renderen, synthetische gegevens genereren of bestanden converteren.
• Omniversum showroom, beschikbaar als app in de Omniverse Open Beta, stelt niet-technische gebruikers in staat om te spelen met Omniverse-technologiedemo’s met realtime fysica en platformweergavetechnologieën.

AR-, VR- en Multi-GPU-rendering zijn enkele van de nieuwe functies die zijn ontwikkeld voor de Omniverse. Ook opmerkelijk is de aankondiging van integraties voor infrastructuur en industriële digitale tweelingtoepassingen met software van Bentley Systems en Esri waarmee ingenieurs en ontwerpers fysiek nauwkeurige digitale tweelingen van gebouwen en producten kunnen creëren, of echte, levensechte simulatieomgevingen kunnen creëren om robots te trainen of autonome voertuigen voordat ze in de fysieke wereld worden geplaatst

• Met Bentley iTwin voor NVIDIA Omniverse hebben iTwin-gebruikers de mogelijkheid om grote, nauwkeurige offshore industriële faciliteiten en constructies fysiek te verkennen alsof ze er in realtime doorheen lopen.
• Esri, een toonaangevende leverancier van software voor het in kaart brengen van stedenbouwkundige ontwerpen, brengt de Esri ArcGIS CityEngine-applicatie naar het Omniverse, waarmee miljoenen gebruikers van het ArcGIS-ecosysteem worden verbonden met het Omniverse-platform.

Nog een hoogtepunt van deze aankondiging: Omniverse Enterprise is nu beschikbaar. Hierdoor kunnen wereldwijde 3D-ontwerpteams die in meerdere softwaresuites werken, in realtime samenwerken, in een gedeelde virtuele ruimte, vanaf elk apparaat.

Use Case: Ericsson maakt digitale tweelingen voor 5G-netwerken op NVIDIA Omniverse

Het eigenlijke simulatieplatform is gebruikt om 5G-netwerken te ontwikkelen, functies en diensten te verbeteren.

Ericsson, een in Stockholm gevestigde fabrikant van telecommunicatieapparatuur, combineert tientallen jaren expertise op het gebied van radionetwerksimulatie met Nvidia Omniverse Enterprise, een realtime virtuele wereldsimulatie- en samenwerkingsplatform voor 3D-workflows. Bij NVIDIA Omniverse heeft Ericsson een digitale tweeling op stadsschaal gebouwd om interacties tussen 5G-cellen en de omgeving nauwkeurig te simuleren voor maximale prestaties en dekking.

5G maakt een aantal nieuwe use-cases mogelijk, van IoT en productie tot zelfrijdende auto’s en telezorg. Zonder een digitale tweelingbenadering kunnen de interacties tussen radiozenders, de omgeving, mensen en mobiele apparaten niet echt worden begrepen vanwege het gebrek aan detail.

German Ceballos, onderzoeker bij Ericsson, zei:

“Vóór het Omniversum werden netwerkdekking en capaciteit geanalyseerd door veel aspecten van complexe interacties, zoals fysieke fenomenen en aspecten van mobiliteit, te vereenvoudigen. We zullen nu in staat zijn om netwerkimplementatie en -functionaliteit op zeer gedetailleerde schaal te simuleren met behulp van het Omniverse.”

Bovendien kunnen netwerkingenieurs, met de mogelijkheden van opkomende Omniverse-platforms zoals Omniverse VR, onmiddellijk een virtual reality-headset opzetten en elk onderdeel van elk model verkennen, op een schaal van 1:1, instellingen en antennes aanpassen en letterlijk de effect van dingen die in het echte leven niet worden gezien.

Voor Ericsson biedt de Omniverse digital twin universele telecommunicatie-inzichten, snellere ontwikkelingscycli en de mogelijkheid om geavanceerde netwerken te bouwen tegen lagere kosten.

Focus op het Sim-Real domein gap-probleem

Training op datasets die niet naar de fysieke wereld worden vertaald, kan de netwerkprestaties zelfs verslechteren.

Deze kloof tussen sim en echt presenteert zich op twee manieren. Het weergaveverschil komt overeen met het pixelniveauverschil tussen het gesimuleerde beeld en het echte beeld, dat wordt veroorzaakt door de manier waarop de simulator gegevens genereert en het inhoudsverschil dat te wijten kan zijn aan het gebrek aan diversiteit van echte wereldinhoud en het verschil tussen sim en echte wereldcontext.

Omniverse Replicator is ontworpen om verschillen in weergave en inhoud te verminderen.