Healthy Strings: AI-Powered Posture Tracking for Violinists

🎻 Violin Posture, Sound, Performance & Technology

Healthy Strings ist ein interdisziplinäres Forschungsprojekt zur Analyse von Haltung, Bewegung, Spieltechnik, Klang und gesundheitlicher Belastung beim Violinspiel. Ziel ist die Entwicklung eines offenen, transparenten und praxistauglichen Verfahrens, das Violinist*innen mit handelsüblichen Kameras aufzeichnet und Bewegungsdaten ohne am Körper angebrachte Marker auswertet.

Das Projekt verbindet Musikphysiologie, Violinpädagogik, Physiotherapie, musikalische Akustik, Musikpsychologie, Bewegungsanalyse, Sensorik, Biorobotik und Data Science. Im Mittelpunkt steht nicht die Vorgabe einer einzigen „richtigen“ Haltung. Untersucht wird vielmehr, wie instrumentenspezifische, funktionale Asymmetrien von potenziell belastungserhöhenden Haltungs- und Bewegungsmustern unterschieden werden können.

Forschungsziele

Das Projekt entwickelt schrittweise ein standardisiertes Protokoll für Video- und Audioaufnahmen von Violinist*innen. Markerlose Bewegungsdaten sollen mit physiotherapeutischen und instrumentalpädagogischen Expert*innenratings sowie akustischen Parametern verbunden werden. Langfristig soll daraus eine wissenschaftlich fundierte Grundlage für Forschung, Unterricht, Prävention und individuelles Feedback entstehen.

Zentrale Forschungsfragen

Im Zentrum steht die Frage, welche kleine Zahl wissenschaftlich und praktisch relevanter Variablen Haltung, Bewegung, Spieltechnik, Klang und gesundheitliche Belastung sinnvoll miteinander verbindet. Untersucht wird auch, welche Asymmetrien funktional sind, welche Bewegungsmuster längerfristig belastend sein könnten, welche Kameraperspektiven stabile Messwerte liefern und wie Bewegungsstrategien mit Intonation, Dynamik und Klangfarbe zusammenhängen.

Methoden und technischer Ansatz

Die methodische Entwicklung basiert auf den SInES Tools der Universität Wien. Maschinelles Pose Tracking mit BlazePose rekonstruiert aus Standardvideos dreidimensionale Körperlandmarken und Bewegungsmodelle. Analysiert werden unter anderem Gelenkwinkel, Bewegungsbahnen, Geschwindigkeiten, Beschleunigungen und ausgewählte Haltungsparameter. Die Ergebnisse werden mit synchronen Audiodaten, Expert*innenbeurteilungen sowie, soweit verfügbar, Noraxon-, Motion-Capture- und EMG-Referenzdaten verglichen. Da sich das Forschungsdesign noch in Entwicklung befindet, werden Aufnahmeprotokolle, Variablen und Validierungsverfahren in Pilotstudien weiter präzisiert.

Aktueller Projektstand

In Pilotaufnahmen werden unterschiedliche Kamerapositionen und Aufnahmekonstellationen verglichen. Erste methodische Vergleiche zeigen eine gute Übereinstimmung bei großräumigen Bewegungen des Oberkörpers und der Arme. Kleine Rotationen, insbesondere an Unterarm und Handgelenk, bleiben ein wichtiges Ziel der weiteren Validierung.

Im nächsten Schritt werden das Aufnahmeprotokoll, die multimodale Synchronisation und die Bewertungskriterien weiter standardisiert. Ein internationales Forschungsretreat in Lucca und Pisa dient 2026 der gemeinsamen Methodenentwicklung, der Durchführung standardisierter Aufnahmen und der Vorbereitung weiterer Forschungs- und Förderprojekte.

Perspektiven

  • Niederschwellige Bewegungsanalyse mit Standardkameras oder Smartphones.
  • Nachvollziehbares Feedback für gesundes und effizientes Üben.
  • Einsatz in Violinpädagogik, Musikphysiologie, Prävention und physiotherapeutischer Beratung.
  • Multimodale Forschungsdaten zu Bewegung, Haltung und Klang.
  • Offene und reproduzierbare Workflows für Forschung und Lehre.

Projektleitung und wissenschaftliche Koordination

  • Ao. Univ.-Prof. Mag. Dr. Matthias Bertsch, Motion-Emotion-Lab, Centre for Music Physiology, mdw – Universität für Musik und darstellende Kunst Wien – bertsch@mdw.ac.at
  • Univ.-Prof. Dr. Christoph Reuter, SInES Lab, Institut für Musikwissenschaft, Universität Wien

Projektteam

  1. Matthias Bertsch (1, 8) 🇦🇹 – Forschungskoordination, Musikphysiologie, Akustik und Datenerhebung
  2. Christoph Reuter (2, 8) 🇦🇹 – musikalische Akustik, Audioanalyse und SInES Tools
  3. Alexandra Türk-Espitalier (1, 8) 🇦🇹 – Violinpädagogik und Haltungsbeurteilung
  4. Tina Margareta Nilssen (1) 🇦🇹/🇳🇴 – Violinperformance, Musikphysiologie und Expert*innenratings
  5. Tobias Großhauser (1) 🇦🇹 – Sensortechnologie und Interaction Design
  6. Alessio Nacuzi (3, 4, 8) 🇮🇹 – Violinpädagogik, Biorobotik, Motion Capture und Datenerhebung
  7. Bronwen Ackermann (6,7) 🇦🇺 – Performing Arts Health und Physiotherapie
  8. Alberto Carratello (4, 8) 🇮🇹 – Violinperformance, Pädagogik und Datenerhebung
  9. Christoff Zalpour (6, 8) 🇩🇪 – Physiotherapie, Prävention und Bewegungsanalyse
  10. Elisabeth Grain (6, 8) 🇩🇪 – Physiotherapie und Bewegungsanalyse
  11. Giorgio Stefano Gnecco (5) 🇮🇹 – Machine Learning, Data Science und Forschungsförderung
  12. Alberto Bologni (4) 🇮🇹 – Violinpädagogik und Rekrutierung von Musiker*innen
  13. Veronica Santoro (3) 🇮🇹 – Biorobotik und Datenanalyse
  14. Calogero Maria Oddo (3) 🇮🇹 – Biorobotik, Neuroprothetik und Sensortechnologie
  15. Nikolaus Ballenberger (6) 🇩🇪 – Biomechanik sowie Haltungs- und Bewegungsanalyse bei hohen Streichern
  16. Dirk Möller (6,8 ) 🇩🇪 – Musikphysiologie, Physiotherapie, EMG und Bewegungsanalyse

Kooperationspartner

  1. Motion-Emotion-Lab, Centre for Music Physiology, mdw – Universität für Musik und darstellende Kunst Wien, Wien 🇦🇹
  2. SInES – Space for Interdisciplinary Experiments on Sound, Institut für Musikwissenschaft, Universität Wien, Wien 🇦🇹
  3. The BioRobotics Institute, Scuola Superiore Sant’Anna, Pisa 🇮🇹
  4. Conservatorio di Musica Luigi Boccherini, Lucca 🇮🇹
  5. Scuola IMT Alti Studi Lucca, Lucca 🇮🇹
  6. INAP/O – Institut für angewandte Physiotherapie und Osteopathie, Hochschule Osnabrück, Osnabrück 🇩🇪
  7. University of Sydney, Sydney 🇦🇺
  8. Mit Unterstützung der Österreichischen Gesellschaft für Musik und Medizin (ÖGfMM), Wien 🇦🇹

Publikation

Präsentation

  • Bertsch, M., Reuter, C., Türk-Espitalier, A., Nilssen, T. M., Großhauser, T., Nacuzi, A., Carratello, A., Grain, E., Brüggemann, J., & Leitz, T. (10. April 2026). Healthy Strings: AI-Powered Posture Tracking for Violinists [Posterpräsentation]. Symposium Beyond the Score – Health & Well-Being in Music and Performing Arts, Salzburg.

Kontakt

Ao. Univ.-Prof. Mag. Dr. Matthias Bertsch
Motion-Emotion-Lab, Centre for Music Physiology
mdw – Universität für Musik und darstellende Kunst Wien
bertsch@mdw.ac.at