Beschreibung
Das Projekt "AI Inference: Intelligent Office and Classroom" adressiert Herausforderungen in herkömmlichen Klassenzimmern und Büros, in denen Sprachbarrieren, unbekannte Begriffe auf Präsentationsfolien und verdeckte Notizen am Whiteboard zu Kommunikationsproblemen führen. Durch den Einsatz künstlicher Intelligenz (KI) und verschiedener AI Inference-Techniken im Intelligent Classroom sollen diese Hindernisse überwunden werden.Die Aufgaben des Projekts beinhalten die Entwicklung einer Analyse für den Kontext von Vorträgen, Präsentationen und Konferenzsituationen mithilfe optischer und akustischer Sensorik. In Zusammenarbeit mit dem Projektteam sollen folgende Funktionen realisiert werden:
1. Blick ins Auditorium:
- Personenanzahl und Teilnehmerliste
- Identifikation fehlender Zuhörer
- Freundschaftsanalyse der Zuhörer
3. Der Vortrag selbst:
- Automatische Transkription des Vortrags
- Übersetzung des Transkripts in Echtzeit-Untertitel
- Kontextbasierte Augmentierung
3. Vortragsfolien bzw. Tafelbild/Whiteboard:
- Texterkennung auf Folien
- Augmentierung von Begriffen mit Wikipedia-Erläuterungen
- Texterkennung aus Handschrift auf Tafel/Whiteboard
4. Der Vortragende:
- Identifikation des Vortragenden
- Gestenerkennung des Vortragenden
- Herausrechnen des Vortragenden aus dem Kamerabild
Die Zielsetzung ist die Generierung eines neuen augmentierten Bildes bzw. Videos aus dem Kamerabild und der Audiospur, das Untertitel, statistische Daten, Begriffsdefinitionen oder den herausgerechneten Vortragenden zeigt. Dabei werden AI-Frameworks wie OpenVINO und KI Open Model Zoo als Basis genutzt. Die genauen Ziele und Details werden in enger Abstimmung mit der Projektgruppe definiert.
Themen des Projekts umfassen Bildverarbeitung (OpenCV), AI Inference, Contextbased AI, KI-Frameworks wie OpenVINO, Softwareentwicklung, Sensorik, Augmented Reality, und AI Hardware Support für Edge Computing und Embedded Computing.
| Zeitraum | 1 Juni 2022 → 31 Dez. 2023 |
|---|---|
| Bekanntheitsgrad | Regional |