capita selecta: finale presentatie

TEAM 4 : AUGMENTED

REALITYStijn VerbekeJoris Nijs

Thomas De l’Arbre

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

Idee

1: Gaze interfaces 2: Scene / Image completion 3: Augmented Reality 4: 3D interpolatie

Keuze: (3)Augmented RealityKeuze van het publiekEigen keuzeMeest praktisch haalbaar

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

Doel

Doel van Augmented Reality ProjectManuele handleiding verbeteren a.d.h.v. bril

(augmented reality bijstand)Praktische invulling: IKEA-kast

○ WaaromVeel gebruikt, veel gekende problemen, gemakkelijk

beschikbaar,…

○ Wat willen we bereikenSneller en juister de kast in elkaar steken

Doel

Bestaande applicaties:Auto-herstellingenMilitary VehiclesReeds IKEA-handleiding met visuele

bijstand, zonder augmented reality.

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

Technologiescan

Beschikbare Toolkits:AR Toolkit (C++)NyAR Toolkit (Java)FLAR Toolkit (Flash AS)

Gebruikte technologie: FLAR ToolkitWaarom?

○ Flash is gemakkelijker om grafische elementen toe te voegen (pijlen,…)

Eerste visualisatie: bestaande demoapplicatie

Technologiescan:Software Framework

Nadelen FlarToolkitJapanse documentatieBeeld met haperingenMarkers buiten/binnen beeld niet goed

ondersteunen + slechte herkenning Nieuwe software: FlarManager

Betere documentatieBeeld is vlotterBetere herkenning markersSoftware gemakkelijk te gebruiken

Technologiescan:Markers

Eerste fase: zelf markers gezochtOnline demo’sKleine online bibliothekenFlarToolkit

Technologiescan:Markers

ResultatenZwarte rand (vierkant) moet duidelijk

zichtbaar zijnGenoeg verschil tussen de markersTekst niet goed herkend binnen markers

Overgeschakeld naar de 16 standaard markers in FlarManager

Architectuur

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

Blokkenwereld

Testscenario3 blokken met vast nummer op elkaar

plaatsen (toren) a.d.h.v. textuele instructies Implementatie

Pijl wanneer blok buiten beeld gaatPijlen onderling tussen de blokkenGetallen op de blokken voor volgordeTekst bovenaan met instructies

Blokkenwereld

VeronderstellingenGeen markers binnen beeld verplaatsen

t.o.v. markers buiten beeld○ Relatieve posities t.o.v. andere makers loopt

mis○ Camera beweegt zich meer dan objecten

Geen markers verplaatsen buiten beeldElke marker mag maar 1x voorkomen

Blokkenwereld

Resultaten na gebruikerstestSucces criteria

○ Geen fouten○ Opmerkingen

Tekst onduidelijk op lichte achtergronden

○ ConclusieTe klein probleemImplementatie werkt goedNood aan bril om door te kijken bij groter probleem

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

IKEA-kast

Verder op implementatie blokkenwereld Naar IKEA om een kast

IKEA-kast

ImplementatiefasePijlen tussen objecten weggelaten

○ Meeste objecten niet in beeld1 marker op elke kant (2 per object) + 1 voor

elk vijzentypeEnkele overgangen manueel

IKEA-kast

Eigen praktische toevoegingenVijzen op aparte markers (rood/groene

overlay)Figuren uit de papieren handleiding bij tekstFrame rond objectenRood/groene overlay voor positie vijzenRood/groene overlay voor inpassen

objecten

IKEA-kast

Evaluatie randvoorwaarden:Ter beschikking:

○ Papieren handleiding en AR-handleidingCriteria

○ Snelheid, foutenAantal personen

○ Leeftijd, voorkennis, …Taal

○ Engels vs Nederlands

IKEA-kast

Evaluatie uitwerking:Helft aantal personen eerste papieren

handleiding, dan AR-bril. Andere helft eerst AR-bril, dan papieren handleiding.○ Om de invloed van voorkennis met de eerst

uitgevoerde manier te beperken / vergelijkenSnelheid en aantal foutenvergelijken tussen

beide manieren.

Overzicht

Idee Doel Technologiescan Blokkenwereld IKEA-kast Resultaten Besluit

ResultatenOnderzochte personen:

○ 9 personen○ diverse leeftijden (22-45)○ 2 vrouwen / 7 mannen○ 8 Nederlands- en 1 Engelstalige○ Voorkennis: 1 zonder / 4 veel / 4 gematigd

Resultaten

1 2 3 4 512:00:00 AM

01:12:00 AM

02:24:00 AM

03:36:00 AM

04:48:00 AM

06:00:00 AM

Fase 1: Papier dan Bril

1 2 3 4 512:00:00 AM

01:12:00 AM

02:24:00 AM

03:36:00 AM

04:48:00 AM

06:00:00 AM

07:12:00 AM

08:24:00 AM

Fase 2: Papier dan Bril

Papier

Bril

1 2 3 4 512:00:00 AM

01:12:00 AM

02:24:00 AM

03:36:00 AM

04:48:00 AM

06:00:00 AM

07:12:00 AM

Fase 3: Papier dan Bril

1 2 3 4 512:00:00 AM

12:28:48 AM

12:57:36 AM

01:26:24 AM

01:55:12 AM

02:24:00 AM

02:52:48 AM

Fase 4: Papier dan Bril

Papier

Bril

Resultaten

1 2 3 412:00:00 AM

12:28:48 AM

12:57:36 AM

01:26:24 AM

01:55:12 AM

02:24:00 AM

02:52:48 AM

03:21:36 AM

03:50:24 AM

Fase 1: Bril dan Papier

1 2 3 412:00:00 AM

01:12:00 AM

02:24:00 AM

03:36:00 AM

04:48:00 AM

06:00:00 AM

07:12:00 AM

08:24:00 AM

09:36:00 AM

Fase 2: Bril dan Papier

Bril

Papier

1 2 3 412:00:00 AM

01:12:00 AM

02:24:00 AM

03:36:00 AM

04:48:00 AM

06:00:00 AM

Fase 3: Bril dan Papier

1 2 3 412:00:00 AM

12:28:48 AM

12:57:36 AM

01:26:24 AM

01:55:12 AM

02:24:00 AM

02:52:48 AM

03:21:36 AM

Fase 4: Bril dan Papier

Bril

Papier

Resultaten

Fouten met papieren handleiding resulteert in grote tijden vergeleken met bril (papier eerst, bril erna)

Papier altijd beter wanneer bril eerst gebruikt wordt (door voorkennis waar de fouten liggen)

Resultaten

Verklaring verschil hoge/lage tijdenMensen met bril konden niet goed zien (2/9)DieptezichtVoorkennisProbleem te klein om voordelen van bril

duidelijk te zien (niet complex genoeg)

Resultaten Pro AR-handleiding

Oriëntatie (fouten)Duidelijke feedback op de juiste momenten

(overgangen tussen fases)Welke objecten nodig op welk momentBril altijd ter beschikking voor de gebruiker

Resultaten

Contra AR-handleiding (huidige versie)LeertijdOnhandig bril-ontwerp

○ Zwaar○ Eronder kunnen kijken○ Niet goed voor slechtzienden

Onstabiele technologie (detectie)

Resultaten

Conclusies (zie demo)Rotatiepijlen onduidelijk Groene pijlen onduidelijkZwevende frames rond objecten +

Rode/groene overlay vijzen niet stabielOvergang fases manueelKleinere resolutie (tekst/figuren)DieptezichtNiet goed voor slechtzienden

IKEA-kast

Demo

IKEA-kast

Mogelijke oplossingenMeer markers gebruiken voor overgangen

fasesIntegreren van meerdere markers om

stabieler beeld te krijgenBetere cameraresolutie

Besluit

Duidelijke proof-of-conceptGroot potentieel: minder foutenFun-factor: leuker,…

Nadelen:Niet realiseerbaar op grote schaal (prijs)Nog geen voldoende ondersteuning qua

technologie (hardware/software) ○ beeldherkenning, resolutie,…

Besluit

Future workUpdates implementatieBetere marker-herkenningSoftware om handleidingen in te geven

(scripttaal)Object recognition vs MarkersBetere hardware (bril)

Vragen?