Augmented reality visar digital grafik över en fysisk studio i strömmade spel

Augmented reality, eller AR, är en teknik som visar digitala element ovanpå en bild av verkligheten i realtid. I strömmade produktioner kan det innebära att en fysisk plats används som grund, medan grafik, tredimensionella objekt eller virtuella element läggs till i videon som användaren ser. Tekniken används redan i många typer av direktsända format, bland annat i live spel, sportsändningar, nyhetsstudior och underhållningsprogram.

Vad AR innebär i praktiken

AR skiljer sig från VR, som är en helt virtuell miljö. I VR kan hela bildupplevelsen vara digital, medan AR vanligtvis visas över en verklig grund i den fysiska världen. Ett bord, en vägg eller en vy av verkligheten används som utgångspunkt. Därefter läggs digitala objekt till i bilden, exempelvis en grafisk skylt, ett tredimensionellt objekt eller interaktiva element.

Det som är gemensamt för alla AR-upplevelser är att det digitala elementet ser ut att befinna sig i den fysiska miljön som används som grund. Det kan därför inte bara vara en platt bild som visas ovanpå videon av verkligheten, utan ska följa kamerans perspektiv, rörelse och position i rummet. AR kräver därför mer avancerad teknologi än en vanlig grafisk upplevelse. Systemet behöver veta var kameran befinner sig, åt vilket håll den pekar och vilka optiska egenskaper den har för att kunna visa AR-grafiken över verkligheten på ett naturligt sätt.

Kameraspårning är grunden för AR

Kameraspårning är den grundläggande teknologin som gör att AR-element kan hålla sig på rätt plats även när kameran eller perspektivet rör sig. Sensorer registrerar kamerans position, rotation och ibland även zoom- och fokusrörelser. Datan skickas sedan till ett renderingssystem som placerar den digitala grafiken korrekt i bilden av den fysiska världen så att den syns från samma synvinkel som kameran är riktad mot.

Spårningssystemen som gör detta möjligt brukar använda sig av kameror, infraröda sensorer, markörer som systemen använder som ankare eller data från själva kameraobjektivet. Vissa system registrerar kamerans rörelse hundratals gånger per sekund för att grafiken inte ska hamna fel när kamerans vy ändras.

Med denna spårningsteknik kan ett digitalt objekt se ut att stå på en fast punkt i verkligheten även när kameran rör sig runt objektet. Målet med spårningen är att få objektet att synas från samma perspektiv som ett verkligt objekt.

Renderingsmotorer skapar bilden

Den digitala grafiken skapas och beräknas i en renderingsmotor, ofta en spel- eller realtidsmotor som Unreal Engine, Unity eller specialiserade system för tv-sändningar. Motorn tar emot data från kameran och placerar 3D-objekten i en virtuell kopia av verkligheten. Den räknar sedan ut hur objekten ska se ut från kamerans synvinkel.

Realtidsrendering är en annan teknologi som används inom AR. Den gör att AR-bilden skapas samtidigt som en sändning pågår, i stället för att renderas i efterhand. Tekniken används idag i många direktsända produktioner, särskilt i sportsändningar, till exempel för att visa reklam vid sidan av en fotbollsplan. Eftersom reklamen läggs ovanpå bilden av fotbollsplanen kan produktionsbolaget visa reklam som är relevant för tittare i olika delar av världen istället för att visa samma reklam för alla.

Compositing och videobilden

Efter att AR-grafiken renderats kombineras den med den råa kamerabilden i en process som kallas compositing. Systemet lägger det digitala lagret över eller bakom delar av den fysiska bilden, beroende på hur scenen ska visas. Det krävs mer avancerade AR-lösningar för att kunna visa objekt som kan döljas bakom fysiska föremål.

I vissa produktioner används en grön- eller blåskärm för att separera delar av bilden. I andra fall kombineras AR med en fysisk scen och en LED-vägg, där den digitala miljön delvis visas på skärmen och delvis läggs till som AR-grafik.

Vad AR kan användas till i onlinecasinon

I onlinecasinon kan AR användas för att lägga digital grafik ovanpå en videoström av ett fysiskt spelbord. Det kan handla om spelstatus, rundor, nedräkningar, poäng, resultatfönster eller visuella markeringar som visas ovanpå bordet utan att den fysiska miljön behöver byggas om eller att casinot behöver använda fysiska skyltar.

Ett vanligt användningsområde är information som uppdateras under en pågående spelrunda. En digital etikett kan exempelvis visa när insatser är öppna, när en runda är stängd eller spelets resultat. Eftersom grafiken renderas i realtid kan den kopplas till casinots spelsystem och uppdateras utan att en fysisk skylt eller skärm behöver användas i studion.

AR kan också användas för att skapa större visuella element än vad som ryms i en fysisk studio. Ett bord med en grön bakgrund kan se ut att stå på ett stort casinogolv och ha en animerad bakgrund eller tredimensionella objekt som ser ut att stå i rummet. I mer avancerade spelmiljöer kan en presentatör eller dealer interagera med ett virtuellt objekt i studion som en del av spelets presentation.

Olika typer av AR-element

I en casinostudio kan AR-grafik delas in i tre huvudkategorier: informativ grafik (spelstatus och resultat), dekorativ grafik (animationer och visuella effekter) samt interaktiva objekt (digitala hjul eller virtuella skärmar).

Informativ grafik underlättar för spelaren att följa spelrundan, medan dekorativ grafik ger en estetisk upplevelse. AR-grafik ändrar inte den fysiska utrustningen; bord, kort och roulettehjul finns kvar i studion medan digital grafik adderas ovanpå.

Tekniken är densamma som i sport- och nyhetssändningar: spårning, rendering och compositing som tillsammans lägger ett digitalt lager ovanpå en verklig bild.