26.06.2020

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

Mit "Immersive Light Field Video" schafft Google eine neue Form von 3D-Video, in dem man - bis zu einem gewissen Grad - die Perspektive wechseln und "um die Ecke schauen" kann.
/artikel/google-3d-video-immersive-light-field
Google: So sieht der
(c) Google: So sieht der "Capture Rig" aus - 46 Kameras für eine neue Form von 3D-Video

Mit “Immersive Light Field Video with a Layered Mesh Representation” trägt das Projekt derzeit noch einen recht sperrigen Namen, der vor einer kommerziellen Nutzung wohl nochmal überdacht werden muss. Doch was Google-Mitarbeiter unter diesem Titel kreiert haben, ist durchaus beeindruckend. Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein. In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”. Mit bisherigen 3D- oder auch 360-Grad-Video-Lösungen waren Nutzer immer auf einen Beobachtungspunkt fixiert.

Hardware-Seite als kleinere Herausforderung

Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung. Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video (siehe unten). Sogar Gegenstände in nur 20 Zentimeter Entfernung können erfasst werden.

+++ Mehr News zum Thema Artificial Intelligence +++

Es ist vor allem die Software, die neue Maßstäbe setzt. In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle. Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

Erklär-Video zu “Immersive Light Field Video with a Layered Mesh Representation”

Unterschied zu bisherigen 3D-Video-Formaten

Dadurch meinen die Projekt-Mitarbeiter auch, einen bedeutenden Fortschritt im Vergleich zu ähnlichen Versuchen der vergangenen zwei Jahrzehnte erreicht zu haben. Während die derzeit gängigen 3D-Video-Formate für VR-Anwendungen durch die statische Perspektive bei vielen Usern zu Übelkeit führen würden, gebe es bei den bisherigen multiperspektivischen Ansätzen stets hohe Hardware-Kosten bei der Erstellung und -Anforderungen bei der Verarbeitung.

⇒ Blog-Beitrag

⇒ Whitepaper

Redaktionstipps
Deine ungelesenen Artikel:
13.11.2024

Nach Aufnahme in Microsoft-Programm und Investment: Wiener KI-Startup in Konkurs

Nach anfänglichen Erfolgen, musste das Wiener Lip-Sync-Startup Lalamu Konkurs anmelden. Der Gründer erklärt.
/artikel/nach-aufnahme-in-microsoft-programm-und-investment-wiener-ki-startup-in-konkurs
13.11.2024

Nach Aufnahme in Microsoft-Programm und Investment: Wiener KI-Startup in Konkurs

Nach anfänglichen Erfolgen, musste das Wiener Lip-Sync-Startup Lalamu Konkurs anmelden. Der Gründer erklärt.
/artikel/nach-aufnahme-in-microsoft-programm-und-investment-wiener-ki-startup-in-konkurs
Lalamu, Konkurs
(c) Lalamu

Zuerst eine Tonspur, dann das Video eines Gesichts (etwa auch auf einem Foto oder nicht allzu abstrakten Gemälde oder sogar auf einer Statue) aufnehmen – fertig. Die Aufnahmen werden vom Server mittels KI-basiertem Tool verarbeitet. Das Lip Sync-Video kommt nach ein paar Sekunden zurück und kann auf TikTok und Co gepostet werden. Das konnte das Produkt des Wiener Startups Lalamu.

Lalamu: Neben Lip-Sync auch B2B-Angebot

Die B2C-App, die in der Basis-Version kostenlos war und für die es mehrere Packages mit längerer Video-Dauer und ohne Werbung zu kaufen gab, war jedoch nicht der einzige Geschäftszweig. Lalamu wollte auch mit einem B2B-Angebot durchstarten. Konkret wandte man sich an Filmindustrie, Museen und Agenturen, die das AI-Algorithmus-basierte Tool des Startups für ihre Zwecke einsetzen sollten.

Mit diesen Vorhaben konnte man ein Investment ergattern: Das Wiener Unternehmen holte sich insgesamt 245.000 Euro von Investor:innen. Es wurde auch ins Microsoft for Startups-Programm aufgenommen, schaffte es mit der Lalamu Studio App in den Canva App Store mit mehr als 400.000 Usern und entwickelte schlussendlich die unabhängige Web-Platform lipsyncer.ai. Nun aber berichtet der Alpenländische Kreditorenverband (AKV) vom Konkurs des KI-Startups.

Konkurs eröffnet

“Die LaLaMu EntertAInment GmbH kann ihren laufenden Zahlungsverpflichtungen nicht mehr nachkommen. Vom zuständigen Handelsgericht Wien wurde ein Konkursverfahren eröffnet”, heißt es dort.

Das sagt der Founder

Auf Anfrage erklärt Founder Matthias Spitzer, dass es in einer Zeit, in der das Startup Unterstützung gebraucht hätte, etwa für neue Developer, keine gegeben habe. Die Konkurrenz aus den USA (Runway und Sync Labs) hätten dagegen über die letzten Jahre mehrere Millionen US-Dollar an Investment erhalten.

“Das ist ein Genickbruch”, sagt Spitzer. “Da kommst du nicht mehr weiter.” Lalamu habe noch versucht mit Lipsyncer.ai “die Kurve zu kratzen”, habe die Videoqualität verbessert und optimiert, damit sie etwa bei Werbevideo-Vorproduktionen oder Erklärvideos zum Einsatz kommen kann. Doch leider hätten die vielen User:innen bloß den Free Modus-Bereich genutzt, wie der Founder erwähnt.

“Unser Umsatz hat es einfach nicht erlaubt, zu wachsen”, ergänzt Spitzer. “Wir wurden links und rechts überholt. Eigentlich waren wir ja eine Zeit lang im Sektor weltweit bekannt bzw. namhaft und spürten eine klare Bewegung nach vorne. Wir haben uns sehr erhofft mehr gesehen zu werden und eine großzügige Finanzspritze zu erhalten. Aber, was wirklich schade ist, keiner in Österreich hat sich getraut im großen Stil zu investieren.”

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

Google bringt mit einem 46-Kamera-Koloss 3D-Video auf ein neues Level

  • Ein kolossaler “Capture Rig”, in dem 46 Kameras verbaut sind, fängt das Grundmaterial für ein neues Level von 3D-Video ein.
  • In diesem können User – bevorzugt mit VR-Brille – bis zu einem gewissen Grad die Perspektive wechseln und so sogar “um die Ecke schauen”.
  • Die Hardware-Seite ist dabei dem Vernehmen nach die kleinere Herausforderung: Der “Capture Rig” bestehend aus 46 üblichen Sport-Kameras mit je rund 18 Zentimeter Abstand, einer Plexiglas-Halbkugel, einem Gestell und einem Stativ sei “günstig und relativ leicht herzustellen”, meinen die Entwickler in einem Erklär-Video.
  • Es ist vor allem die Software, die neue Maßstäbe setzt: In einer Reihe von Schritten errechnet der genutzte Algorithmus auf Basis der Google DeepView-AI-Technologie unter anderem die Entfernungen der erfassten Gegenstände und erstellt 3D-Modelle.
  • Am Ende komme aber eine “leichtgewichtiges” Format heraus, das sich auch in mobilen VR/AR-Plattformen, oder im Web-Browser rendern lasse, so die Entwickler in ihrem Whitepaper.