Autor-Archiv Marlon Schumacher

VonMarlon Schumacher

Music and Installation Chair @Internet-of-Sounds 2024

I am pleased to have been invited to serve as music and installation co-chair together with Esther Fee Feichtner for the

5th International Symposium on the Internet of Sounds

held at the International Audio Laboratories Erlangen, from 30 September – 2 October 2024. From the official Symposium Website:

„The Internet of Sounds is an emerging research field at the intersection of the Sound and Music Computing and the Internet of Things domains.  […] The aim is to bring together academics and industry to investigate and advance the development of Internet of Sounds technologies by using novel tools and processes. The event will consist of presentations, keynotes, panels, poster presentations, demonstrations, tutorials, music performances, and installations.“

 

The Internet of Sounds Research Network is supported by an impressive number (> 120) of institutions from over 20 countries, with a dedicated IEEE committee for emerging technology initiatives. Partners from Germany include:

VonMarlon Schumacher

Music for Headphones

Vorstellung des Projekts eines Alumni beim Ircam Forum 23 in Paris mit Software von Marlon Schumacher
Projektverantwortliche: Marco Bidin, Fernando Maglia

Im IRCAM-Forum im März 2023 in Paris (special edition zum Thema AR/VR Spatialization) hat der ehemalige Student und Mitarbeiter Marco Bidin Projekte zum Thema binaurale Klangsynthese vorgestellt, welche durch von Prof. Marlon Schumacher entwickelte Software realisiert wurden. Als Synthese-Werkzeuge kamen  unter Anderem CSound, Cycling 74’s Max, OpenMusic mit der Library OMPrisma zum Einsatz, gemastert wurde in der DAW Logic Pro X. Die Klangsynthese verwendet teils subtraktive Ansätze, Waveguides und andere physikalische Modelle.

 

Ausschnitt eines in Csound implementierten Orchesters.

Music for Headphones III ist eine Produktion von ALEA, Associazione Laboratorio Espressioni Artistiche.

Zur Beschreibung der Präsentation geht es mit diesem Link.

Im folgenden Video sind Klangbeispiele zu hören, für welche Teile des Programmcodes und Workflows demonstriert werden.

VonMarlon Schumacher

S3D Competition Audio Production

In October 2022, I served as a jury member for the Student 3D Audio production Competition from the Verband Deutscher Tonmeister e.V. The competition comprised of 3 categories. I was a judge in the category Contemporary Music/Computer Music.

The winning productions can be listened to online via head-tracked binaural audio, using this excellent  (computervision-based) web-audio player here.

VonMarlon Schumacher

Smart Speaker Evaluation

Fragestellung

Im Rahmen des Designs eines Distributed Smart Speaker Arrays*, ob AoIP (Audio over IP) Lautsprecher der Firma Genelec hierfür geeignet sind und voraussetzende Kriterien erfüllen.

Kriterien zur Examinierung der Lautsprechermodelle 4420A und 4430A.

Die Genelec AoIP Lautsprecher bieten folgende Vorteile:

  • Übertragung von Strom,  Audio und Konfigurationsdaten mit nur einem Kabel.
  • Der Interne DSP der Lautsprecher kann via Netzwerk konfiguriert werden, und bietet 20 Filter an, zudem delay und Gesamtlautstärke
  • Es können sowohl Digital (RJ45 AES67) als auch Analog (Euroblock) Eingänge gleichzeitig mit interner Mischung verwendet werden
  • Es besteht eine offizielle public API.
  • Dimensionen sind klein genug (ca 15cm Breite, s. Spatial Aliasing), um kontinuierliche Arrays zur Holophonie (Wellenfeldsynthese, kompakte Arrays, ein/auslaufende Schallfelder, etc.) einzusetzen

Testziele:

  • DSP Parameter setzen (über API, ohne Herstellereigene Software)
  • Relative Latenz mehrer Lautsprecher (selber Stream)
  • Lautstärke/Schalldruck (aufgrund der kleinen Dimensionen)
  • Verhalten bei hohen Pegeln (Klirrfaktor, etc.)
  • Steuerprotokoll-Dokumentation der internen API
  • Latenz bei Steuerung der internen DSP Einstellungen über API

 

Vorläufige Evaluation

Steuerung

Die Lautsprecher werden per REST-Schnittstelle gesteuert. Der Hersteller bietet eine öffentliche API, die einige Einstellungen erlaubt. Die Software zur Konfiguration nutzt ebenfalls diese REST-API, jedoch mit mehr Endpunkten. Mit Hilfe von Wireshark konnte die Kommunikation direkt mitgelesen werden. Es findet keinerlei Verschlüsselung statt. 

 

Dank an Stephan Westphal für Durchführung der Tests.

 

VonMarlon Schumacher

Zylia 6DOF navigable audio

Zylia’s ZM-1 microphone is designed for three-dimensional recording. It allows the user to record sound scenes and separate single sound sources though a combination of microphone array technology and digital signal processing algorithms.

The spherical microphone has 19 capsules that each have an omni-directional polar pattern and that use Micro-Electro-Mechanical Systems (MEMS) technology. The durable casing features an LED ring status indicator. It is capable of recording at sample rates of 44.1 and 48 kHz and 24- bit sample depth. Gain adjustment controls in steps of 0.5 dB from −12 dB to +32 dB are provided. The microphone is 6.1 in high and 4 in in diameter. It weighs 15.5 oz. The ZM-1 has an integrated desktop stand and it can be mounted on microphone stands that use 1⁄4-in and 5⁄8- inthreads. It connects to computers using a micro-USB port in the base.

Zylia Studio is a software application for recording and processing from the Zylia microphone. It can be used to balance and pan the multichannel recording and to separate it into individual audio tracks for use in a digital audio workstation (DAW), if required. Two separation modes are available, a virtual microphone mode and a high separation mode. The first of these mimics a directional microphone and allows any part to be isolated from the three-dimensional space. The high separation mode uses an additional process to mimic the behavior of a close microphone, reducing ambient sounds and background noise and giving even better sound source separation. The audio can be stored as PCM WAV files or using a lossless compression that reduces the size by half. The software is compatible with Macintosh, Windows, and Linux operating systems.

A PRO version of the software is available as a VST/AU plug-in. This provides spatial filtering and signal separation tools within a DAW and gives the user access to virtual microphones with different polar patterns and characteristics in post-production. A number of different group and surround sound presets are provided.

An Ambisonics converter can process convert multi-channel audio into b-format higher-order Ambisonics. It also supports FuMA or ACN channel ordering and SN3D or N3D normalization. It is also compatible with YouTube’s ambiX and Facebook’s TBE formats. The converter is available as a standalone application or as a VST plug-in.