Tech

Die Spectacles von Snap sind Teil einer ehrgeizigen AR-Vision

Es ist ein wunderbar sonniger Tag in San Francisco, und ich laufe auf der Dachterrasse über einer Wohnung im Stadtviertel North Beach herum. Hier oben ist viel los: Ich erforsche in schneller Folge ein Modell des Sonnensystems, versuche, einem Zombie davonzulaufen, male im 3D-Raum und lerne verschiedene Blumenarten kennen, während ich sie in einer Vase arrangiere.

Von himmlisch bis bodenständig, alle diese Erfahrungen sind digital. Sie haben Momente der erweiterten Realität, die durch die neueste Version von Snaps Spectacles Hightech-Sonnenbrille ermöglicht wurden, die ich anstelle meiner eigenen Brille trage. Die Spectacles überlagern 3D-Bilder auf meiner Dachumgebung, pumpen Ton in meine Ohren und ermöglichen es mir, mit dem, was ich sehe, über ein an der Schläfe angebrachtes Touchpad oder durch Gesten mit meinen Händen zu interagieren.

Das ist eine viel ehrgeizigere Reihe von Funktionen als frühere Versionen von Spectacles, einschließlich der Originale von 2016 und ihrer Nachfolger von 2018 und 2019. Bei diesen Modellen ging es hauptsächlich darum, Snapchat-Fans Standbilder und Minivideos aufnehmen zu lassen, ohne sich die Mühe machen zu müssen, sie abzurufen und zu zielen ein Smartphone. (Die Spectacles von 2019 sind weiterhin erhältlich und konkurrieren mit einem ähnlichen Paar Ray-Bans, die mit Technologie von Meta ausgestattet sind.)

Letzten Mai, Snap stellte die neue, AR-fähige Version von Spectacles vor, die in der Tat einfach als „die neue Brille“ bekannt sind. Anstatt sie wie frühere Versionen zu verkaufen, erkennt Snap an, dass sie derzeit ein Experiment und kein Produkt sind. Das Unternehmen hat sie kostenlos an rund 200 Schöpfer in 30 Ländern verteilt und glückliche Empfänger aus Bewerbern ausgewählt, die ein Online-Formular ausfüllen.

„Das Hauptaugenmerk dieses Programms liegt darauf, sicherzustellen, dass jeder, der dieses Gerät erhält, aktiv mit unserem Produktteam zusammenarbeitet“, sagt Sophia Dominguez, Head of AR Platform Partnerships bei Snap. „Aufbauen, Grenzen überschreiten und die Plattform so weit wie möglich vorantreiben.“

Angesichts ihrer begrenzten Veröffentlichung sind die neuen Spectacles ein bewusst kleiner Ausflug in AR. Aber Snap experimentiert auch mit dem Medium auf einem der größten vorstellbaren Wandteppiche: Snapchat selbst.

Eine Brille ist viel näher an etwas, das Sie fröhlich tragen können, als ein Magic Leap oder eine HoloLens.

Es kann verlockend sein, AR reflexartig als eine Technologie zu betrachten, die noch nie richtig Fuß gefasst hat mögliche sechsjährige Ausnahme von Pokémon Go. Allerdings sind Snapchat-Objektive, die Live-Videos spielerisch verwüsten, indem sie ausgefeilte Frisuren, Fantasiehintergründe und andere Spezialeffekte im Handumdrehen anwenden, definitiv AR und sehr beliebt. Laut Snap nutzen 200 Millionen Menschen sie täglich, sechs davon Milliarde tägliche Interaktionen.

„Wir sind sehr, sehr stolz auf diese Zahl“, sagt Dominguez. Aber dann weist sie darauf hin, dass es in den nächsten Jahren noch enormes Wachstumspotenzial gibt: Laut a Deloitte-Studie im Auftrag von Snapwerden fast alle Smartphone-Nutzer bis 2025 häufige AR-Nutzer sein. Snapchat, das sich bei jedem Start der App für einen Blick auf alles öffnet, was die Kamera Ihres Smartphones sieht, ist gut positioniert, um einen Teil dieser zusätzlichen Aufmerksamkeit zu erregen.

blank
Entwickler von Drittanbietern können jetzt Snapchat-Objektive erstellen, die an reale Orte gebunden sind. [Photo: courtesy of Snap]

Bei den Objektiven von Snapchat geht es bereits um mehr als nur darum, Kindern mundgerechte, verrückte Unterhaltung zu bieten, zum Teil, weil die kostenlose Lens Studio-Software von Snap es Drittentwicklern ermöglicht, Objektive zu produzieren, die Snap selbst niemals erstellt hätte. Und durch den Bau von Hardware wie den neuen Spectacles gibt sich das Unternehmen die Chance, einer der Hauptakteure zu sein, die herausfinden, wie AR tief in neue Aspekte unseres Lebens integriert werden kann. Die Ergebnisse all dessen könnten das Unternehmen in direkten Wettbewerb mit größeren Möchtegern-AR-Königszapfen wie Apple und Meta bringen, die beide AR-Hardware noch in begrenzter Menge herausbringen müssen. Es könnte sogar zu so etwas führen sieht aus wie das Metaversum.

Mit anderen Worten, jenseits all dieser überschwänglich albernen Snapchat-Filter ist etwas Ernstes im Gange.

In Arbeit

Vorerst sind die neuen Spectacles ein faszinierender Meilenstein bei der Suche nach AR-Kopfbedeckungen, die ein kategoriedefinierender Hit sein könnten. Um die notwendige Elektronik und den Akku unterzubringen, sind sie klobig und kantig, mit einem etwas brutalistischen Look. Ihr bauchiger Ladekoffer ist nichts, was Sie in eine Hosentasche stecken werden. Trotzdem sehen diese Spectacles eher wie eine hippe Sonnenbrille als wie ein Headset aus und wiegen weniger als ein Drittel eines Pfunds. Sie sind viel näher an etwas, das Sie fröhlich unterwegs tragen können, als an einem Magischer Sprung oder Microsoft HoloLens. (Sie passen sogar bequem auf meinen extrem breiten Kopf.)

Keine der AR-Erfahrungen, die ich beim Tragen der Spectacles ausprobiert habe, war die Art von Killer-App, die eine vollständig kommerzialisierte Version dieser Brille alleine verkaufen würde. Aber sie waren alle ziemlich geschickt und es machte Spaß, sie auszuprobieren. Und einer davon – eine Speisekarte eines Restaurants, die ich mit einer Wischgeste in der Luft durchsehen konnte – deutete auf rein praktische Anwendungen für die Technologie weit außerhalb von Snaps traditionellem Steuerhaus in der Unterhaltung hin.

Brielle Garcia Menü AR-Objektiv für Snapchat
Brielle Garcias Mit der AR-Menülinse können Sie das Angebot eines Restaurants mit einer Handbewegung erkunden. [Image courtesy of Snap]

Wie bei AR-Brillen aller Art können technische Einschränkungen der Aufhebung des Unglaubens im Wege stehen. Die dualen 3D-Waveguide-Displays, die digitale Bilder auf die reale Welt legen, waren hell genug, dass sie nicht von der Sonne ausgebleicht wurden. Aber sie haben ein Sichtfeld, das diagonal 26,3 Grad misst, was bedeutet, dass Sie größere Elemente (z. B. einen auf Sie stolpernden Zombie) nicht immer in ihrer Gesamtheit auf einmal sehen können. Irgendwann zeigten die Spectacles, die ich ausprobierte, auch eine Meldung an, dass sie überhitzten, woraufhin ein Snap-Mitarbeiter sie gegen ein anderes Paar auswechselte.

Es ist nicht schwer zu verstehen, warum Snap diese Spectacles an ein paar hundert Entwickler verschenkt, anstatt die Verbraucher zu bitten, dafür zu bezahlen. Das Unternehmen behauptet nicht, dass es kurz vor der Auslieferung der endgültigen AR-Hardware steht: Dominguez betont, dass Snap-CEO Evan Spiegel „gesagt hat, dass dies eine 10-jährige Reise sein könnte“. (Das stimmt mit Metas 10- bis 15-Jahres-Schätzung für seine eigene AR/Metaverse-Vision überein.)

Matthew Hallbergs Mit SketchFlow Lens for Spectacles können Sie mit virtuellen 3D-Pinseln malen. [Animation: courtesy of Snap]

Dennoch sagt Dominguez, dass der Fortschritt, der sich in den neuen Spectacles widerspiegelt, bedeutsam ist. Das ultimative Ziel ist es, eine AR-Brille zu entwickeln, die Menschen gerne tragen, wohin sie auch gehen. „Entwickler sind immer noch Menschen“, sagt sie, „und Entwickler müssen sie draußen tragen … Wenn wir sie dazu bringen können, sie draußen zu tragen und Dinge zu bauen und sich für Dinge zu begeistern, dann sind wir auf dem richtigen Weg nach vorne.“

Die Kamera von Snapchat intelligenter machen

Während Snap weiterhin mit Spectacles experimentiert, erweitert es auch die in Snapchat verfügbaren AR-Funktionen. Diese Bemühungen erfordern nicht, dass das Unternehmen selbst Hardware-Durchbrüche entwickelt. Aber für Snapchat, um fleischigeres, immersives AR zu bieten als jetzt klassische Effekte wie die Fähigkeit zu Regenbogen kotzengibt es auf der Softwareseite noch viel zu tun.

„Mein Team versucht im Grunde, die Snapchat-Kamera intelligenter zu machen, um alles in der Welt um sie herum zu verstehen“, sagt Qi Pan, Director of Computer Vision Engineering bei Snap. Snaps Herangehensweise an AR, erklärt er, besteht darin, „zu wiederholen, zu lernen und die nächste Generation ein bisschen besser zu machen“. Diese Arbeit läuft seit Jahren. Im Jahr 2018 wurde beispielsweise Londons legendärer Uhrturm Big Ben im Rahmen eines umfassenden Renovierungsprogramms von Gerüsten verdeckt erst jetzt Schluss machen. Pans Team baute einen AR-Filter, der quasi die Gerüste weggeschält, der den Turm in seiner ganzen stattlichen Pracht enthüllt. (Da es sich um Snapchat handelt, versetzte der Filter Big Ben auch in eine riesige simulierte Schneekuppel.)

blank
AR-Schöpfer Kat V. Harris in ihrer Brille. [Photo: courtesy of Snap]

„Das ist ein sehr schönes Beispiel dafür, was AR leisten kann“, sagt Pan. Es war auch eine Übung zur Bewältigung der vielen Herausforderungen von AR, wie z. B. die erfolgreiche Identifizierung von Big Ben aus jedem Winkel bei allen möglichen Wetter- und Beleuchtungsumgebungen. Seitdem hat Snap 30 Filter für andere Orientierungspunkte erstellt, vom Eiffelturm bis zum New Yorker Flatiron Building. Es wurde auch eine weitere Funktion namens Local Lenses eingeführt, die es mehreren Personen im selben physischen Bereich ermöglicht, an gemeinsamen AR-Erlebnissen teilzunehmen – wie z die Londoner Geschäfte in der Carnaby Street mit virtueller Farbe schmücken.

Über 250.000 Entwickler haben 2,5 Millionen Snapchat-Objektive veröffentlicht, die über 3,5 Billionen Mal angesehen wurden.

Natürlich wird Snap nicht alleine kundenspezifische Objektive für jeden bemerkenswerten Ort der Welt erstellen. Im vergangenen Monat veröffentlichte das Unternehmen eine Technologie namens Custom Landmarkers Dadurch können Benutzer der Lens Studio AR-Designsoftware die von ihnen erstellten Erlebnisse mit einem bestimmten physischen Ort verknüpfen – von einer Statue bis zu einem Schaufenster –, sodass sie für Personen sichtbar sind, die tatsächlich dort sind. Obwohl das Feature derzeit nur mit Snapchat und nicht mit Spectacles funktioniert, ist es die Art von Infrastruktur, die eine notwendige Zutat sein wird, wenn wir in eine Ära kommen, in der unsere alltägliche Sicht auf die Welt um uns herum von AR eingehüllt ist.

Maßgeschneiderte Wahrzeichen bedienen die boomende Entwickler-Community von Snap, die das Unternehmen durch Investitionen wie z Stipendien für AR-Entwickler. (Auch AR wird auf der sein im Rampenlicht stehen Partner-Gipfel nächste Woche.) Über 250.000 Entwickler haben insgesamt 2,5 Millionen Objektive veröffentlicht, die insgesamt über 3,5 Billionen Mal angesehen wurden; Auch wenn sich die meisten dieser Statistiken auf Snapchat-Linsen der traditionellen, Chat-orientierten Art beziehen, ist dies eine große Basis, auf der man aufbauen kann.

Novaby AR Octopus für Snapchat
Für eine Convention in Seattle schuf Novaby eine Meereslandschaft – komplett mit einem riesigen Pacific Octopus. [Image courtesy of Novaby]

Ein Drittentwickler, der bereits die Grenzen dessen, was Snapchat tun kann, erweitert, ist das in Seattle ansässige Studio für digitale Kunstproduktion Novaby. Es hat Lens Studio und benutzerdefinierte Wahrzeichen verwendet, um aufwändige AR-Kreationen wie eine Seelandschaft für eine Convention in Seattle und eine Nachbildung der Goldrausch-Ära zu erstellen, die auf dem Union Square in San Francisco zu sehen ist.

In der Vergangenheit hatte Novaby einen Großteil seiner AR-Arbeit in Unity erledigt, der leistungsstarken 3-D-Plattform, die als Spiele-Engine begann und in jüngerer Zeit ihren Horizont auf AR und VR erweitert hat. Snaps Lens Studio „übertrifft wirklich vieles von dem, was wir mit Unity machen könnten“, sagt Julia Beabout, CEO von Novaby. „Aber was noch wichtiger ist, es ermöglicht uns, keine App von Grund auf neu zu erstellen, um das zu tun, was wir tun.“ Aus diesem Grund empfiehlt sie es ihren Kunden, um schnell und kostengünstig ein großes Publikum zu erreichen.

Novaby Gold Rush AR-Erlebnis für Snapshot
Das Gold Rush AR-Objektiv von Novaby bringt frühe Gebäude in San Francisco zurück, die aus Holz gebaut wurden, das von Schiffen zurückgewonnen wurde. [Image courtesy of Novaby]

Novaby verzichtet nicht auf Tools wie Unity, um aufwändige AR-Erlebnisse zu erstellen. Aber da die Plattform von Snap über die amüsanten, Chat-erweiternden AR-Spezialeffekte hinausgeht, mit denen sie begonnen hat, wird sie zu einer praktikablen Alternative für ambitionierteres Geschichtenerzählen. „Jetzt ist Lens Studio an dem Punkt angelangt, an dem wir eine Reihe von Objektiven erstellen und sie möglicherweise zu einer Tour zusammenfügen könnten, die eine Art Gesamterzählungsbogen hat“, sagt Beabout.

All diese ortsbezogenen AR-Extravaganzen leben in Snapchat und nicht in Spectacles. Aber „vieles von dem, was wir bauen, ist für die Zukunft von Spectacles“, sagt Pan. Bei einer Smartphone-App wie Snapchat „gibt es immer noch ziemlich viel Reibung – Sie gehen vielleicht an der erstaunlichsten AR-Aktivierung vorbei, die jemals gebaut wurde, aber Ihr Telefon ist in Ihrer Tasche und Sie werden es nie erfahren.“

Auch wenn der Tag, an dem Ihre AR-Brille Sie auf diese erstaunliche Aktivierung hinweist, noch Jahre entfernt ist, möchte Snap bereit sein – und sowohl die Hardware als auch die Software, die es jetzt entwickelt, dienen dazu, dieses Ziel zu erreichen.

https://www.fastcompany.com/90737627/snaps-ar-vision-is-about-spectacles-and-a-whole-lot-more?partner=feedburner&utm_source=feedburner&utm_medium=feed&utm_campaign=feedburner+fastcompany&utm_content=feedburner Die Spectacles von Snap sind Teil einer ehrgeizigen AR-Vision

JACLYN DIAZ

USTimeToday is an automatic aggregator of the all world’s media. In each content, the hyperlink to the primary source is specified. All trademarks belong to their rightful owners, all materials to their authors. If you are the owner of the content and do not want us to publish your materials, please contact us by email – admin@ustimetoday.com. The content will be deleted within 24 hours.

Related Articles

Back to top button