Mixed Reality (AR/VR) in Unity

Wat is Mixed Reality?

Mixed Reality is een technologie die de fysieke en digitale wereld combineert tot een geïntegreerde omgeving. Het maakt gebruik van Augmented Reality (AR) en Virtual Reality (VR) om digitale objecten en informatie in de echte wereld te projecteren. Mixed Reality kan worden gebruikt voor een breed scala aan toepassingen, zoals training, simulatie, entertainment en communicatie.

Unity

Unity is een game engine die voornamelijk gebruikt wordt voor het ontwikkelen van games. Naast games is het ook mogelijk om AR / VR apps te ontwikkelen. Dit hebben we gedaan in de workshop. Er is een basis app opgezet die een plaatje kon herkennen en op dat plaatje een blokje weergaf. Om de app wat meer zin te geven is er een verbinding gelegd met de MQTT broker die draait in het lokaal. De temperatuur van de Rasberry Pi werd verzonden naar de MQTT broker en deze kon vervolgens uitgelezen worden in de Unity app. Zo werd er op het blokje wat eerder werd getoond nu ook de temperatuur van de Rasberry Pi weergeven, zodat er een basis vorm van Mixed Reality ontstond.

Toepassingen

Mixed Reality kan in de industrie toegepast worden voor bijvoorbeeld digitale werkinstructies. Aan de hand van een Vision systeem kan er een projector opgezet worden die de verschillende onderdelen kan herkennen om daar vervolgens instructies op weer te geven. Ook kan het gebruikt worden voor het weergeven van de status van een bepaald proces in bijvoorbeeld een fabriek. Er kunnen dan statistieken en mogelijke bottle necks getoond worden om zo te kijken waar in het productieproces nog winst te behalen valt.