Dieses Projekt thematisiert das Design eines interaktiven bild- und klanggebenden Displays in Form eines ca. 1.5m*1.0m großen passiven „Holoscreen“ Displays aus Acryl, versehen mit 4 passiven Audio Transducer Systemen und Sensorik. Es soll interaktive, screen- und audio-basierte gestische Interaktion (anwenderisch oder künstlerisch) ermöglicht werden. Zusätzlich zu Touch Input, kann optional mit Tracking der Position / Gaze des Anwenders gearbeitet werden, zur interaktiven Beeinflussung des Displays (z.B. Parallax-Effekte, Focus, etc.). Front- oder Rückprojektion möglich.
BELA boards besitzen zwei powered amp Ausgänge, diese sollten sich direkt mit den Transducern auf dem Screen verbinden lassen. Es gibt zudem 2 Kanäle Audioeingang, (opt mit Phantomspeisung) und mehrere Analog Eingänge, zB. für Infrarot tracking (einige kommerzielle Touch Displays verwenden diesen Ansatz). https://learn.bela.io/using-bela/about-bela/bela-hardware/#audio-io
Es wäre interessant, eine Lösung zu entwickeln, die vision-less ist (ohne Optik) und alleine mit einer embedded Plattform funktioniert (BELA oder Raspberry Pi). Diese ließe sich dann skalieren/modularisieren, so dass man eine variable Anzahl von Screens für multi-user Szenarien damit betreiben kann.
Optional könnte ein Stylus von Polhemus (magnetisches Sensing) eingesetzt werden. In diesem Fall wäre der Screen eine Art drawing tablet ohne multitouch input. Eine interessante Anwendung könnte dabei sein, ohne Videoprojektion zu arbeiten, und den durch den transparenten Screen sichtbaren Hintergrund als Oberfläche zu verwenden. Dies wäre evtl. ein separates Projekt.
Proof-of-Concept Pilotversuch
Vorgeschlagenes Equipment:
- Videoprojektor, Audio-verstärker
- Kamera, Depth Kamera
- Piezo Sensor, IR Sensor
- Raspberry Pi
- MS Kinect
Vergabekriterien:
Freies Studienprojekt
ECTS Punkte:
Referenzen:
- Imaging touch screen for screen-based interaction
- IDMIL interactive table , tactosonix
- NIME: Multi-Touch Displays
Über den Autor