26.06.2020

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

Mit "Immersive Light Field Video" schafft Google eine neue Form von 3D-Video, in dem man - bis zu einem gewissen Grad - die Perspektive wechseln und "um die Ecke schauen" kann.
/artikel/google-3d-video-immersive-light-field
Google: So sieht der
(c) Google: So sieht der "Capture Rig" aus - 46 Kameras für eine neue Form von 3D-Video

Mit “Immersive Light Field Video with a Layered Mesh Representation” trägt das Projekt derzeit noch einen recht sperrigen Namen, der vor einer kommerziellen Nutzung wohl nochmal überdacht werden muss. Doch was Google-Mitarbeiter unter diesem Titel kreiert haben, ist durchaus beeindruckend. Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein. In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”. Mit bisherigen 3D- oder auch 360-Grad-Video-Lösungen waren Nutzer immer auf einen Beobachtungspunkt fixiert.

Hardware-Seite als kleinere Herausforderung

Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung. Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video (siehe unten). Sogar Gegenstände in nur 20 Zentimeter Entfernung können erfasst werden.

+++ Mehr News zum Thema Artificial Intelligence +++

Es ist vor allem die Software, die neue Maßstäbe setzt. In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle. Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

Erklär-Video zu “Immersive Light Field Video with a Layered Mesh Representation”

Unterschied zu bisherigen 3D-Video-Formaten

Dadurch meinen die Projekt-Mitarbeiter auch, einen bedeutenden Fortschritt im Vergleich zu ähnlichen Versuchen der vergangenen zwei Jahrzehnte erreicht zu haben. Während die derzeit gängigen 3D-Video-Formate für VR-Anwendungen durch die statische Perspektive bei vielen Usern zu Übelkeit führen würden, gebe es bei den bisherigen multiperspektivischen Ansätzen stets hohe Hardware-Kosten bei der Erstellung und -Anforderungen bei der Verarbeitung.

⇒ Blog-Beitrag

⇒ Whitepaper

Redaktionstipps
Deine ungelesenen Artikel:
08.11.2024

TU Wien: Neuer lernender Roboter putzt Badezimmer

An der Technischen Universität Wien (TU Wien) wurde ein Roboter entwickelt, der selbstständig das Badezimmer reinigen kann. Auch für handwirkliche Betriebe kann diese Technologie nützlich sein.
/artikel/tu-wien-neuer-lernender-roboter-putzt-badezimmer
08.11.2024

TU Wien: Neuer lernender Roboter putzt Badezimmer

An der Technischen Universität Wien (TU Wien) wurde ein Roboter entwickelt, der selbstständig das Badezimmer reinigen kann. Auch für handwirkliche Betriebe kann diese Technologie nützlich sein.
/artikel/tu-wien-neuer-lernender-roboter-putzt-badezimmer
Ein Putzroboter putzt ein Waschbecken.
Der neue Putzroboter der TU Wien beim Reinigen des Test-Waschbeckens (c) tuwien.at

Roboter können für uns mittlerweile Staubsaugen, Rasenmähen oder Abwaschen. Doch wann können sie komplexere Aufgaben wie das Putzen eines Badezimmers erledigen? Forschende an der TU Wien haben nun möglicherweise eine Antwort darauf.

Denn an der TU Wien wurde ein neuer Putzroboter für das Badezimmer entwickelt, der unter anderem Waschbecken nach vorheriger Anleitung reinigen kann. Die Arbeit wurde bei der IROS 2024 in Abu Dhabi präsentiert – einer der renommiertesten Robotik-Konferenzen weltweit.

TU Wien-Roboter lernt vom Menschen 

Programmiertechnisch ist Putzen recht komplex. Ein Waschbecken ist sehr verwinkelt. Wie kommt man in die schwierigen Ecken, wieviel Kraft muss festgelegt werden? Ein Mensch macht es vor – der Roboter der TU Wien lernt.

“Die geometrische Form eines Waschbeckens mit Kameras zu erfassen, ist zwar relativ einfach. Aber das ist nicht der entscheidende Schritt. Viel schwieriger ist es, dem Roboter beizubringen: Welche Stelle der Oberfläche soll er mit welcher Art von Bewegung bearbeiten? Wie schnell? In welchem Winkel? Mit welchem Kraftaufwand?”, sagt Andreas Kugi vom Institut für Automatisierungs- und Regelungstechnik.

Nach Aussage der TU Wien benutzt der Roboter zum Lernen einen “Hightech-Schwamm”, ausgestattet mit Kraftsensoren und Tracking-Markern. Damit putzte ein Mensch mehrfach eine Außenkante des Test-Waschbeckens. “So generieren wir mit einigen wenigen Demonstrationen eine Riesenmenge an Daten, die dann verarbeitet werden, damit der Roboter lernt, was richtiges Putzen eigentlich bedeutet”, sagt Hartl-Nesic, der in Kugis Team die Industrial-Robotics-Gruppe leitet

Roboter hilft Handwerksbetriebe

Die neue Technologie sei laut TU Wien für viele Prozesse interessant, wie beispielsweise für das Schleifen von Holzwerkstücken in Tischlereien, das Reparieren und Polieren von Lackschäden an Fahrzeugkarosserien oder das Schweißen von Blechteilen. Letztlich sollen diese Roboter auf mobile Plattformen gesetzt werden können, sodass sie in Handwerksbetrieben flexibel eingesetzt werden.

Der Lernprozess gelingt laut Aussage der TU Wien durch eine innovative Datenverarbeitungsstrategie. Dabei werden mehrere bereits erprobte Techniken aus dem Bereich maschinelles Lernen kombiniert. Die Messdaten werden statistisch aufbereitet, und mit den Ergebnissen wird ein neuronales Netzwerk trainiert. Daraus resultieren optimierte Anweisungen für die Bewegungen des Roboterarms.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.