1 / 84
↑↓ oder ←→ zum Navigieren
HSLU SAS AR/VR
🎓 HSLU SAS – School of Advanced Studies

Augmented & Virtual Reality
Business Integration

Ein praktischer Workshop zu Metaverse, KI-Avataren und 3D-Content-Erstellung

Scroll oder drücke →

📋 Heutige Agenda

1
09:55 - 11:45
Einführung & Setting the Scene
Typische Probleme und Lösungen im Projektmanagement
2
11:50 - 12:35
KI-Avatare für Kundensupport und Training
3
13:15 - 14:50
KI für die Erstellung von 3D-Inhalten
4
15:10 - 16:45
Eigenes Metaverse erstellen
Introduction

🤔 Was sind eure Erfahrungen
mit dem Metaverse und mit KI?

Lasst uns darüber diskutieren...

About Me

🎓 Metaverse Academy 2022

Metaverse Academy 2022

🎨 10 persönliche KI‑Artefakte

10 KI-Artefakte

🖼️ Dezember 2023 – KI Ausstellung

KI Ausstellung 🎬 Video ansehen

📻 Juni 2024 – Online Radio

Online Radio

🚀 August 2025 – Kurse und AI Superpowers Plattform

AI Superpowers

🪩 Juni 2024 – KI Disco

KI Disco

🎨 April 2025 – UI on Demand

UI on Demand

📚 April 2025 – Buch

Buch

🎵 April 2025 – Zwei Künstler auf Spotify

Spotify Artist 1 Spotify Artist 2

📖 August 2025 – Lehrplan 2030

Lehrplan 2030

✈️ November 2025 – Reise Planner/Blog

Reise Planner

🎙️ Januar 2026 – Podcast Co-Host

Podcast

🌌 Skybox

Skybox

⚙️ Typische Probleme und Lösungen
im Projektmanagement

«Ich will es wie in Fortnite.»

– Jeder zweite Kunde

Das Problem ist nicht die Erwartung.
Es ist der Moment, in dem wir sie nicht früh genug korrigieren.

500M+
Budget Fortnite
1000+
Entwickler
7 Jahre
Entwicklungszeit

🔄 Der Feedbackloop aus der Hölle

👔

CEO

«Mehr WOW!»

📢

Marketing

«Mehr Farbe!»

🎨

Design

«Mehr Brand!»

💰

Finance

«Weniger Kosten!»

⚖️

Legal

«Weniger Risiko!»

💻

IT

«Weniger MB!»

💡 Die Lösung

  • Ein Ansprechpartner
  • Eine Stimme
  • Eine Entscheidung

⚠️ Freitag, 17:45 Uhr

«Spatial hat die API geändert.»

1

API Change

2

Code kaputt

3

Kunde ruft an

4

Wochenende weg

⚠️ Das Risiko

  • Das Risiko ist nicht die Technik. Es ist die Abhängigkeit von Plattformen, die wir nicht kontrollieren.

💡 Lösungen

  • Assets agnostisch bauen
  • Exit-Strategie definieren
  • Risiken früh kommunizieren

💸 Die 4 teuersten Worte in 3D-Projekten

«Kannst du noch schnell...»

«Anderes Licht»

Neue Lightmaps backen • Alle Schatten neu berechnen • Reflexionen anpassen • Performance-Tests • Auf allen Geräten testen

5 min
Anfrage
2 Tage
Realität
576x
Faktor

⚠️ Merke

  • In 3D gibt es kein «schnell». Jede Änderung hat Kaskadeneffekte.

📐 Das Dreieck des Schreckens

Wähle zwei. Aber nur zwei.

Dreieck
Schnell + Gut = Teuer
Schnell + Günstig = Schlecht
Gut + Günstig = Langsam

Aber wir brauchen alles drei.

– Jeder Kunde ever

📝 Das Briefing

«Es soll modern wirken, aber auch zeitlos.»

Was der Kunde sagt

• «Clean und minimalistisch»
• «Wie Apple, aber anders»
• «Nicht zu verspielt»
• «Es muss POP haben»

Was wir hören

• «Ich weiss nicht was ich will»
• «Kopiert Apple, aber sagt es keinem»
• «Ich mag keine Farben»
• «Macht irgendwas Auffälliges»

💡 Die Lösung

  • Moodboards
  • Referenzen
  • Konkrete Beispiele
  • Nie mit Adjektiven arbeiten

📦 CASE STUDY

Lalique Metaverse Experience

Lalique 🌐 spatial.io/s/Lalique-Metaverse-Experience

📦 Lalique Metaverse Experience

Luxus digital erleben – Ein virtueller Showroom für Lalique

🎯 Herausforderung

Wie transportiert man das Gefühl von High-End Luxus in die digitale Welt? Die Erwartungen an die Marke Lalique sind hoch – das virtuelle Erlebnis durfte nicht wie eine Spielwelt wirken.

✅ Lösung

Ein immersiver Metaverse Showroom auf Spatial, der die Eleganz und Handwerkskunst von Lalique digital inszeniert – mit photorealistischen 3D-Glasobjekten.

📊 PM Insights

Technische Komplexität: Glas in 3D realistisch darzustellen war extrem anspruchsvoll – Lichtbrechung, Transparenz und Reflexionen mussten perfekt stimmen.

Stakeholder Management: Mehrere Abstimmungsrunden mit dem Chef-Designer waren nötig, bis die visuelle Qualität den Markenansprüchen entsprach.

Kernlearning: Bei Luxusmarken ist «gut genug» nie gut genug – jedes Detail zählt für die Markenwahrnehmung.

🏦 UBS Metaverse

UBS Metaverse 🎬 Video ansehen

⚠️ CASE STUDY – THE HARD LESSON: UBS Metaverse

2021/22 – Das erste Metaverse für eine Schweizer Grossbank

1

START 2021

2

DEVELOP – 12 Mo.

3

APPROVED – Brand ✓

4

READY – Compliance ✓

5

LIVE? – Neuer CEO

💥 Was passierte

  • Alles war fertig. Brand approved. Compliance approved. Server in DE.
  • Dann kam der neue CEO. Neues Positioning & Branding. Projekt gestoppt.

Was wir gebaut haben

3D-Welt der UBS Sales-Dokumente • PDF-Checkout per E-Mail • Mozilla Hubs auf AWS (DE Server) • VR-ready (Oculus)

📊 Das Learning

Zu früh dran sein = Teuer + Komplex + Riskant. Wenn die Technologie noch nicht reif ist, wird jedes Projekt zum R&D-Projekt.

✈️ CASE STUDY

Flughafen Zürich Digital Twin
Virtueller Rundgang durch das neue Dock A – vor der Eröffnung

Flughafen Zürich

✈️ Flughafen Zürich Digital Twin

Virtueller Rundgang durch das neue Dock A – vor der Eröffnung

🎯 Herausforderung

CAD-Daten allein reichten nicht aus. Pläne mussten interpretiert, Stakeholder koordiniert und das Metaverse zur verbindlichen Planungsgrundlage entwickelt werden.

✅ Lösung

Ein detaillierter Digital Twin des neuen Dock A auf Spatial, ergänzt durch eine Guided Tour für interne Mitarbeitende.

📊 PM Insights

Stakeholder-Komplexität: Viele Beteiligte mit unterschiedlichen Prioritäten – klare Kommunikation und Definition der finalen Planungsversion waren entscheidend.

Datenqualität: CAD-Daten waren nicht immer hochwertig genug – vieles musste manuell nachgebaut und verifiziert werden.

Mehrwert: Die Guided Tour ermöglicht Mitarbeitenden eine nahtlose Eingewöhnung – sie wissen bereits vor dem ersten Tag, was sie erwartet.

🌐 spatial.io/s/Flughafen-Zurich

🧠 CASE STUDY

Ella – KI Mental Health Coach
Ein empathischer Avatar für mentale Gesundheit am Arbeitsplatz

Ella

Partner: etwas tun · Angestellte Schweiz · Eidgenössisches Personalamt

🌐 etwastun.ch/chatbot

🧠 Ella – KI Mental Health Coach

Ein empathischer Avatar für mentale Gesundheit am Arbeitsplatz

🎯 Herausforderung

Wie positioniert man einen KI-Avatar für mentale Gesundheit richtig? Die Abgrenzung zum Psychologen erforderte viel Finetuning und psychologisches Fachwissen.

✅ Lösung

Ella ist als Coach positioniert, der erkennt, wann professionelle Hilfe nötig ist. Verfügbar auf Desktop, Mobile und als lebensechter Avatar in VR/AR.

📊 PM Insights

Persönlichkeits-Finetuning: Wie soll ein Avatar für sensible Themen aussehen und kommunizieren? Subjektive Kriterien erforderten iteratives Testen und Anpassen.

Ethische Positionierung: Ella muss klar als Coach auftreten – keine Therapie, aber mit dem Wissen, wann eine Triage zu Fachpersonen nötig ist. Datenschutz ist zentral, deshalb ist alles anonym.

Multi-Plattform: Eine konsistente Erfahrung über Desktop, Mobile und VR/AR hinweg – technisch und konzeptionell anspruchsvoll.

🤖 KI Avatare

🧠 Ella

Ella Ella 2

🤖 Kaiu

Kaiu Kaiu 2

🎤 Voice Agents

🔊 Elevenlabs

Elevenlabs

👩‍💼 D-ID Lila

D-ID Lila 🌐 d-id.co

✏️ Übung: 15 Minuten

Überlegt euch 5 Use Cases wo KI-Avatare Sinn machen

Interaktion out

Text • Voice • Video • 3D

Interaktion in

Text • Voice • 3D • Video • AR • VR • MX

💡 Technologien

  • Text
  • Voice
  • Website
  • Mobile

🍽️ Mittagspause

🧠 Der KI Teil der Avatare

Knowledge & Guidelines
RAG + System Prompt

📚 Was ist eine RAG?

RAG

🌐 Die UI der Zukunft wird
Spatial und «situational aware».

Demo
Demo
Demo
Demo
Demo

🤖 Welche Use Cases seht ihr für euer Unternehmen?

🎯 Demo ausprobieren

Passwort: hwz-meta

👉 https://gu.kuble.com/metabot/

🔧 Weitere Technologien

💫 3D Gaussian Splatting

Statt eine Szene mit Polygonen oder Voxeln zu beschreiben, wird sie als Menge von 3D Gaussglocken dargestellt. Jede dieser Gaussfunktionen repräsentiert einen kleinen, unscharfen Punkt im Raum, inklusive Position, Farbe, Transparenz und Ausdehnung. Beim Rendern werden diese Punkte auf die Bildfläche projiziert und überlagert, also gesplattet. Das ergibt sehr realistische Bilder mit weichen Übergängen.

💡 Warum das wichtig ist

  • Sehr schnelles Rendering in Echtzeit möglich
  • Hohe visuelle Qualität ohne klassische Meshes
  • Effizienter als NeRFs beim Anzeigen, besonders für interaktive Szenen
  • Gut geeignet für Volumetrie, Scans, XR und Digital Twins
📸

3D Szenen aus Fotos rekonstruieren

🥽

Realtime Visualisierung in AR und VR

🔬

Ersatz oder Ergänzung zu NeRF Pipelines

🎮

Forschung und Game Engine Prototyping

🌍 Worldlabs von Fei-Fei Li

Worldlabs

🎨 Hunyuan 3D Plattform Überblick

Hunyuan 3D ist eine generative 3D KI Plattform von Tencent
Fokus auf automatisierte Erstellung von 3D Modellen mit KI

💡 Was die Plattform macht

  • Erzeugt 3D Modelle aus Texteingaben
  • Erzeugt 3D Modelle aus Bildern oder Referenzen
  • Liefert Geometrie und Texturen
  • Exportfähig für gängige 3D Workflows
Hunyuan
Hunyuan Demo

🧠 Demis Hassabis AGI Definition

AGI Definition
AGI Visual

🎮 Google: Genie 3

Genie 3
📖 Blog 🎮 Project Genie
Genie Demo
Genie Demo
Genie Demo

🌌 Skybox

Skybox

🔄 360°

360

🎨 Skybox erstellen

Skybox erstellen

🌍 Create Environment

Create Environment

🖼️ Image/Text to 3D

Image to 3D

🎨 Krea 3D

Krea 3D

🤗 Huggingface

Huggingface

🔐 Login

User: metaverseacad01@gmail.com

Passwort: Shared_31!

Note to self: Space Public machen.

🤖 EmbodiedGen: Image-to-3D Asset

EmbodiedGen

✨ TRELLIS.2 (Text-to-3D)

TRELLIS

🗿 Rodin - Text oder Bild zu 3D

Rodin 🌐 via fal.ai

🏗️ In 45 Minuten ein
Metaverse erstellen!

Workshop

🌐 Spatial

Spatial

👤 Replika

Replika

🤖 Ani Grok

Ani Grok

💬 Character AI

Character AI

💬 Character AI

Character AI

❤️ Emotionale Bindung mit KI?

Emotionale Bindung

🗣️ Human Dialog?

Human Dialog
Vision

🛤️ Wie reiten wir die AI Welle?

Road To Knowledge

Road to Knowledge

🎁 Rabatt

Rabatt

💰 CHF 240 Rabatt

  • Code: SUPERPOWER
Kontakt

THANK YOU!

Gustavo Salami

Gustavo Salami
Founder, Partner & Innovation Lead

🔗 Connect