Mein AR-Talk: „Herding Llamas in your own flat – A deep dive into ARCore and Sceneform“

Mein Talk war direkt nach der Keynote und dem entsprechend gut besucht. Auf der Droidcon wurden alle Sessions aufgezeichnet. Hier ist die Aufzeichnung des Vortrags:

Es hat mich sehr gefreut, dass der Talk gut besucht war und sich einige interessante Gespräche im Nachhinein ergeben haben.

Top-Thema auf der Droidcon: Crossplatform-Entwicklung

Das Top-Thema war sicherlich Crossplatform-Entwicklung. Beim Barcamp-Tag gab es die erste Panel-Diskussion zum Thema Crossplatfom auf Android. Hier wurden die verschiedenen Ansätze (Flutter, React Native, Cross-Compilation oder klassisch: eine Native App pro Betriebssystem) diskutiert. Die Zuhörer konnten Fragen und das Panel antwortete. Für meinen Geschmack hätte ich gerne mehr von den Panel-Mitgliedern zu ihren Erfahrungen mit den Technologien gehört; eine einführende Runde, wo jede/r kurz die Erfahrungen mit dem eigenen Ansatz schildert wäre gut gewesen.

Der offizielle Konferenzteil startete mit der Keynote von Jake Wharton „Blurring the line between Native and Web“ (YouTube). Jake präsentierte eine Reihe von interessanten Möglichkeiten    zum Teilen von Code zwischen verschiedenen Plattformen. Vor allem interessant fand ich seine Erläuterungen, wo er den Schnitt zwischen Plattform-abhängigen und geteilten Funktionen setzen würde. Im Gegensatz zu Flutter und React Native sieht er den Schnitt zwischen Benutzeroberfläche und der Business-Logik. Ein Schnitt, der das beste aus zwei Welten erlaubt: Native UI-Elemente und damit ein echtes natives Look’n’Feel und geteilte Logik (Datenbank, Business-Logik, Backend-Anbindung).

Ansonsten teilten sich die restlichen Talks grob in zwei Lager: Die Flutter-Talks mit:

• Should we Flutter? – Miriam Busch
• Build a reactive Flutter app! – Brian Egan
• I convinced Groupon to Flutter. Do same with your company! – Tomek Polanski

Und in die Kotlin Multiplatform-Talks:

• (Code) Sharing is caring – Tobias Heine und Said Tahsin Dane
• Mobile Oriented Architecture – Kevin Galligan

Gerade im AR-Bereich scheint Kotlin Multiplatform ein vielversprechendes Thema zu sein. ArKit und ARCore bzw. SceneKit und Sceneform sind ähnlich genug, dass man diese abstrahieren kann. Das bedeutet, dass der Großteil der Android- und iOS-App sich den gleichen Code teilen und es nur geringe plattform-spezifische Teile gibt. Und das alles mit nativem Code, sprich nativer Performance.

Was nehme ich mit?

Neben tollen Gesprächen und vielen Denkanstößen zu Themen, die ich mir bis jetzt noch nicht genauer angeguckt hatte (insbesondere der Enterprise-Track hatte hier viel zu bieten) , nehme ich von der Droidcon mit, einen genauen Blick auf Kotlin Multiplatform zu werfen. Er verspricht ein guter Ansatz für die App-Entwicklung zu werden und insbesondere im Augmented Reality-Umfeld, wo wir noch nicht native UI haben, gut einsetzbar zu sein. Ich habe das Gefühl, dass hier ein neuer Talk für die nächste Droidcon-Saison warte könnte!

The post Droidcon Berlin 2018: AR und Cross-Platform appeared first on Smart As Apps.

Sceneform und Lamas

Der Vortrag führt durch die Erstellung einer AR-App auf Basis von Sceneform. Sceneform wurde gerade auf der Google I/O 2018 als neues Framework für 3D-Grafik auf Android vorgestellt. Durch meine Arbeit an der yourhome AR-App habe ich seit Sceneform Version 0.1 mit dem Google Entwickler-Team zusammengearbeit und kenne so Sceneform seit

Ziel des Vortrages ist es am Ende eine App zu haben, mit der man Lamas in der eigenen Wohnung laufen lassen kann. Um die Lamas nicht in der ganzen Wohnung zu haben, sollen sie durch Zäune auf einen gewissen Bereich beschränkt werden. Alle nötigen Bausteine hierfür werden im Vortrag erläutert:

• Initialisierung von Sceneform und ARCore
• Laden der 3D-Modelle
• Platzierung in der 3D-Welt
• Animation der Lamas (Bewegung in der 3D-Welt)
• Kollisionserkennung zwischen Lamas und Zäunen

Die Beispiel-App veröffentliche ich als Open-Source-Projekt auf Github. Eventuell wird es eine erweiterte Version für Lama-Freunde im PlayStore geben, aber da muss ich mal gucken, ob ich dafür Zeit finde.

The post Augmented Reality-Session bei der Droidcon Berlin 2018 appeared first on Smart As Apps.

Sceneform: 3D-Grafik einfach gemacht

Wer sich die ARCore-Demos zur Version 1.0 angeguckt hat, hat sich gefragt, ob Google jetzt erwartet, dass App-Entwickler OpenGL lernen, um AR-Welten zu erschaffen. Zumal Apple mit SceneKit ein einfach zu nutzendes 3D-Framework hat.

Vor diesem Problem standen wir bei der Entwicklung der yourhome AR-App auch und Google gab uns Early Access zu Sceneform. So war es mit Sceneform möglich, schnell und einfach 3D-Modelle zu laden und in die AR-Szene zu laden. Sceneform ist bereits mit ARCore integriert und nimmt viele Standard-ARCore-Aufgaben ab (z.B. Handling der Session und der Camera-Permission, Synchronisierung der AR- und 3D-Welt). Weitere Details gibt es hier.

Als besonderes Extra kam yourhome AR noch in der Präsentation vor und Romain und Lucy haben sich noch für die gute Zusammenarbeit bei der Entwicklung von Sceneform bedankt (ab 3:55 min).

Cloud Anchors: AR-Welten teilen

Augmented Reality ist ein beeindruckendes Erlebnis, aber noch besser ist es, wenn man es teilen kann. Cloud Anchors ermöglichen es, AR-Szenen auf mehreren Geräten zu teilen. Zudem unterstützen Cloud Anchors neben ARCore auch ArKit. So können Android- und iOS-Nutzer die gleiche AR-Welt erkunden. Auf der I/O wurden hier einige interessante Demos für Multiplayer-AR-Spiele gezeigt. Insgesamt gibt es hier für viele Bereiche spannende Anwendungen, z.B. um die Einrichtung eines Raums zu teilen, virtuelle Ausstellungen zu realisieren oder aber den ganzen Bereich von Multiplayer-Spielen. Wer direkt anfangen möchte, findet Details hierzu auf der Projektseite.

Augmented Images: Eingänge zu AR-Welten

Mit Augmented Images stellt Google den Entwicklern ein Werkzeug zur Verfügung, um auf Bilder im weitesten Sinn in der realen Welt zu reagieren. Hierbei kann es sich um Poster, Logos, Kunstwerke, etc. handeln. Als Entwickler speist man das System vorher Aufnahmen des Bilder aus verschiedenen Winkeln und bei verschiedenen Lichtverhältnissen und trainiert so die Bilderkennung. In der AR-Szene kann man dann 3D-Objekte, wie an erkannte Oberflächen auch, anheften und ARCore übernimmt das Tracking. Mehr Details gibt es auf der Projektseite.

ARCore unterstützt vertikale Flächen

Als letzte kleinere Erweiterung unterstützt ARCore jetzt die Erkennung von vertikalen Flächen. Auch wenn es nur eine kleine Änderung ist, ermöglicht es viele neue Anwendungen, z.B. im Kunst- und Galerie-Bereich. Zugleich zieht ARCore hier mit dem Feature-Umfang von ArKit gleich.

Web AR nimmt Formen an

Der Vortrag zum Thema Web AR gab interessante Einblicke, wie weit der Standard schon vorgeschritten ist und was dort in Zukunft zu erwarten ist. Insbesondere in den angesprochenen Bereich Shopping und Kultur kann ich mir Web AR sehr gut vorstellen. Auch im Zusammenspiel mit Progressive Web Apps (PWA) sehe ich große Chancen, um auch AR-Inhalte bei kleineren Budget umzusetzen. Wie wir aus Projekte für die öffentliche Hand in Zusammenarbeit mit mCRUMBS wissen, sind gerade im Kunst- und Kulturbereich die Budget eher klein. Hier kann Web AR den Weg zu Inhalten bieten, die wie, im Video ab Minute 20 gezeigt, für den Besucher sehr hohen Informationswert bieten.

The post Neues auf der Google I/O: Sceneform, Cloud Anchors & Co appeared first on Smart As Apps.

„Try before you buy“ für bisher schwierige eCommerce-Felder

Während es früher eher mühselig war, eine Schrankwand erst nach Hause zu bringen und dann dort aufzubauen, nur um festzustellen, dass sie irgendwie doch nicht ins Zimmer passt, ist ein Ausprobieren über AR schnell und einfach möglich. Genauso erübrigt sich das Ausmessen des Platzes zu Hause und des Möbelstücks vor Ort: Das AR-Modell wird in Originalgröße im Raum angezeigt. So hat man sofort einen Eindruck, ob das Sofa denn ins Wohnzimmer passt.

Augmented Reality ist nicht nur für Stubenhocker

Auch für Outdoor-Anwendungen, wie im Baumarkt- und Gartenbereich, ist AR geeignet. Obis neuer Gartenplaner ist ein gutes Beispiel für ein potenzielles AR-Outdoor-Projekt. Anstatt eine virtuelle Terrasse einzurichten, könnten Kunden die Möbel, Pflanzen und Fliesen direkt auf der eigenen Terrasse sehen. Wenn der Kunde fertig mit einrichten ist, kann er direkt eine Bestellung für die Materialen aufgeben.

Ein anderes Beispiel ist die Porsche Mission E AR-App. Hier kann man einen Porsche konfigurieren, in die eigene Garage stelle oder auch virtuell Probe fahren. Auch wenn die App sich dem Thema sehr verspielt nährt, zeigt es doch, was in Zukunft zu erwarten ist: Kunden konfigurieren ihre Produkte, probieren sie über Augmented Reality aus und entscheiden sich dann für einen Kauf oder dagegen.

Augmented Reality ist nicht nur für eCommerce und B2C

Auch wenn AR großes Potential für eCommerce und Online-Shopping gibt, ist das nicht der einzige Einsatzbereich. Auch für B2B-Anwendungen gibt es Potential: Makler können ihren Kunden vollausgestattete Wohnungen zeigen oder Architekten ihre Entwürfe vor Ort präsentieren.

Der B2B-Bereich wird in einem kommenden Beitrag noch genauer beleuchtet.

The post Shopping und Augmented Reality: Was erwartet uns? appeared first on Smart As Apps.

The post ARCore 1.0 veröffentlicht appeared first on Smart As Apps.