Meta Connect 2023: meer AI, slimme blokkering van Ray Ban en mixed reality

Elk jaar is het tweedaagse Meta Connect-evenement een feest voor ontwikkelaars en VR-enthousiastelingen over de hele wereld.

Met nieuwe aankondigingen van fysieke producten en functies voor de Meta-suite van apps slagen Mark Zuckerberg en zijn team er altijd in om de aandacht te trekken van de dagelijkse Facebook-gebruiker of toegewijde Quest-fan.
Ook dit jaar was het niet anders.

Missie 3: Van virtual reality naar “mixed reality”

De eerste en meest verwachte aankondiging was de introductie van Quest 3, Meta’s nieuwe mainstream mixed reality-apparaat. Na het succes en de wijdverbreide populariteit van Quest 2 was deze aankondiging iets waar VR-fans en ontwikkelaars al jaren op zaten te wachten.

Vanaf de eerste indruk is Quest 3 de lovenswaardige opvolger van Quest 2, die het landschap van virtual reality en het gebruik ervan in persoonlijke multimediaconsumptie echt heeft veranderd.

De nieuwe versie is nog veelbelovender dankzij zijn ergonomische, draadloze vormfactor en, belangrijker nog, zijn slankere vormfactor.

Nieuwe platte lenzen en een opnieuw ontworpen body zorgden ervoor dat de Quest 3 40% dunner was dan zijn voorganger. Samen met de lenzen heeft het scherm zelf een grote upgrade gekregen met tien keer meer pixels dan de vorige generatie, 4K-resolutie en verbeterde kleurnauwkeurigheid. Verbeterde 3D-audio zorgt voor een meeslepende ervaring onder de motorkap.

Wat de specificaties betreft is de nieuwe Quest 3 nu uitgerust met de capabelere Snapdragon XR2 Gen 2-chip, speciaal ontworpen om VR-, MR- en XR-apparaten van stroom te voorzien.

Hoewel hij nog steeds wordt geleverd met een paar bijgewerkte en vereenvoudigde controllers, zorgt deze krachtige chip voor nauwkeurigere handtracking, waardoor de Quest 3 een vrijwel controllervrije ervaring wordt, net als de Apple Vision Pro.

Maar de roem van de Quest 3 ligt in zijn uitstekende kaartmogelijkheden met behulp van de ingebouwde camera’s en sensoren. In tegenstelling tot oudere Quest-hardware brengt Meta de Quest 3 feitelijk op de markt als een mixed reality-apparaat, waarbij zijn VR-persona wordt gedumpt. Deze marketingverschuiving lijkt logischer en consistenter, gezien de manier waarop de apparaten daadwerkelijk werken.

Waar de Quest 2 en de originele Quest werden gepitcht als VR-tools waarmee gebruikers een virtuele wereld konden binnenglippen, draait de Quest 3 de rollen om en hanteert een enigszins tegenovergestelde benadering. In plaats van de gebruiker volledig in een virtuele realiteit te plaatsen, vergroot het de virtuele realiteit binnen onze 3D-realiteit, waardoor een toegankelijke brug ontstaat tussen het virtuele en het echte.

Dankzij de speciale camera-mapping-mogelijkheden en dieptesensor van de headset biedt Quest 3 niet alleen een volledig meeslepende virtuele realiteit om in te duiken, maar maakt het ook mogelijk dat digitale objecten worden aangevuld met de echte wereld, waardoor een gemengde realiteit ontstaat waarin gebruikers kunnen zien en ermee kunnen communiceren. zowel de digitale wereld als de digitale wereld, en de echte wereld.

Deze interactie kan de vorm aannemen van docking waarbij gebruikers simpelweg een digitaal object, of het nu een scherm of ‘accessoire’ is, op een oppervlak laten vallen waar het voor altijd zal blijven staan, of in een interactieve vorm waarbij het digitale object stuitert of naar beneden glijdt op het fysieke oppervlak. oppervlak.

Deze gemengde realiteit maakt de gameplay op Quest 3 nog meeslepender en expressiever. In plaats van in Quest 2 of Quest in een schermachtige sfeer te spelen, kunnen spelers deze keer profiteren van de ruimte in hun fysieke omgeving en een groot scherm in het midden laten vallen om op een gigantisch scherm te spelen, wat een nep-console-ervaring oplevert. van spelen met vrienden in het echte leven.

Deze schermvergroting, in combinatie met de GPU-zwakte van de nieuwe Snapdragon-chip, maakt het spelen van Quest 3 een soepele, rijke ervaring met meer details over aankomende titels via Xbox-cloudgaming-integraties.

Meer kunstmatige intelligentie

Meta heeft zijn eigen chatbot aangekondigd, genaamd Meta AI, die kan worden gebruikt om antwoorden te krijgen op basisvragen en verzoeken te verwerken, net als andere AI- of smartphone-assistenten op de markt. Maar omdat Meta AI wordt aangedreven door Meta Search en Bing van Microsoft, kan het in realtime naar informatie van internet zoeken, waardoor het geavanceerder is vergeleken met ChatGPT van OpenAI.

AI komt ook naar meta-apps zoals Instagram.

In eerste instantie zal de AI geïntroduceerd worden in het fotobewerkingsgedeelte van de app, waar de AI via een sms snel de achtergrond van een foto kan veranderen of zelfs het onderwerp opnieuw kan ontwerpen.

Meta kondigde ook AI studio aan, een platform om Meta AI-mogelijkheden te gebruiken en er geweldige dingen mee te bouwen. Aangezien deze AI-integraties naar verwachting echter langzamer zullen worden geïmplementeerd dan andere door Meta aangekondigde producten vanwege de bijbehorende veiligheidsproblemen, zal het nog lang duren voordat we zien dat ontwikkelaars de AI-mogelijkheden ten volle benutten.

Slimme rayban

Al deze door AI aangedreven mogelijkheden en jarenlange ervaring met het ontwikkelen van Quest-apparaten komen samen in een ander opwindend Meta-product: de nieuwe Ray-Ban Meta slimme bril.

De nieuwe slimme bril is het resultaat van Meta’s samenwerking met EssilorLuxottica en Ray-Ban.

Deze eenvoudig ogende bril heeft 12 MP ultrabrede camera’s en een Snapdragon AR1 Gen1, waardoor hij 1080p-video kan opnemen. Voor het opslaan van video’s en foto’s is er 32 GB interne opslagruimte aanwezig.

Meta maakte gebruik van het first-person zicht van de camera aan de voorkant en ontwierp het glas om video’s op te nemen en foto’s te maken die bedoeld zijn om rechtstreeks met het Meta-productassortiment te worden gedeeld. Om deze reden is Meta gemaakt in livestreaming vanaf een slimme bril via apps zoals Instagram.

Om de kwaliteit van livestreaming te verbeteren, is de slimme bril uitgerust met een array van 5 microfoons en speciaal ontworpen luidsprekers met 50% maximaal volume en tweemaal zoveel bas in vergelijking met de bril van de laatste generatie.

Volgend jaar gaat Meta ook multimediabrillen produceren door het geïntegreerde systeem door de camera te laten kijken.

Dit opent de deur naar meer nuttige vragen, zoals “Wat zie ik?”. Met een dergelijke prompt zou Meta AI kunnen zien wat een persoon door de camera ziet en dit kunnen matchen met objecten in de trainingsdataset of met afbeeldingen van internet.