GMU:Keeping Track

– Capturing Position and Motion

Fachmodul
Lehrperson(en): Max Neupert, with Workshops by Frieder Weiß and Robert Wechsler
Credits: 6 ECTS, 4 SWS
Date: Thursday, 14:00 to 17:15
Venue: Marienstraße 7b, Room 204 (Steubenstraße 6a, Studio 1)
First meeting: 21.10.2010

Description

Keeping Track – Capturing Position and Motion is a class designed to shine light of different tracking methods and their uses in art, music, dance, performance and entertainment. GPS, RFID and camera tracking can harness movement and create positioning data in different scales which then can be mapped to feed visualisation or sonification. The tracking information can serve as interface and instrument. We will learn and understand the basic principles of motion detection and capturing and work with more complex systems. We will rig a suitable room with a professional motion tracking system allowing us to explore its capabilities and limitations. Part of the course is a two day workshop by Frieder Weiß demoing and introducing the software solution eyecon.

German description

Der Unterricht findet auf englisch statt (Es sei denn alle Teilnehmer einigen sich auf Deutsch als Unterrichtssprache).

Keeping Track – Capturing Position and Motion ist ein Kurs der verschiedene Methoden beleuchtet um Bewegungen zu verorten. In Kunst, Musik, Tanz, Performance, und Unterhaltung wird Tracking eingesetzt. Technologien wie GPS, RFID und die Bewegungserkennung per Videobild können Bewegungen unterschiedlicher Größenordnung in Positionsdaten umwandeln, welche dann auf Visualisierungen oder Sonifizierungen abgebildet werden. Bewegungsdaten sind Eingabemethode und Instrument. Wir werden die Grundlegenden Prinzipien der Bewegungerkennung kennen und verstehen lernen, und mit komplexeren Systemen arbeiten. Ein passender Raum wird mit einem prefessionellen Bewegungserkennungssystem ausgestattet werden, was uns die Möglichkeiten und Schwächen der Technologie erkennen lassen wird. Teil des Kurses ist ein zweitägiger Workshop von Frieder Weiß der die Software Lösung eyecon vorstellen wird.

Topics

• Analogue tracks: Mail-Art
• GPS tracking
• RFID tracking there isn't enough time for this, sorry.
• Understanding camera motion detection and capturing basics with Pure Data
• Understanding camera motion detection and capturing advanced techniques
• Tracking on the stage (dance, ballet, opera and performance)
• Tracking in musical instruments
• Tracking in contemporary art
• Tracking in entertainment, and exhibition design
• making sense of the data: cleaning, thresholding, mapping

Assignments

1. Record a track. See Tim Knowles Mail Art projects for inspiration. Upload result here assignment one
2. Editing OSM. Contribute useful (and/or less useful) data to the OpensStreetMap Project assignment two
3. Basic motion detection patch with Pure Data See Flying Lotus' Fieldlines for inspiration assignment three

Registration procedure

Bewerbung mit folgenden Angaben per E-Mail an: max.neupert (at) uni-weimar.de

• Name
• Fachrichtung und Fachsemester
• Matrikelnummer
• Angabe der geltenden Prüfungsordnung
• Gültige E-Mail-Adresse (@uni-weimar.de zur Bestätigung der Anmeldung)
• kurzes (!) und formloses Motivationsschreiben
  • "Ich würde gerne teilnehmen, weil …"
  • "Ich habe bereits Erfahrung mit …"

Sollte es mehr als 20 Bewerber geben, entscheidet die Reihenfolge des Eingangs, die gleichzeitige Teilnahme an begleitenden Semesterprojekten der Professur sowie das Motivationsschreiben (Vorkenntnisse, Erfahrungen, Interesse am Thema) und das Fachsemester (evtl. letzte Chance zur Kursbelegung) über die Aufnahme in den Kurs.

Leistungsnachweis

Presence, presentation, künstlerische Prüfung, Dokumentation, Eintrag im Wiki. No credits can be given if more than three classes have been missed.

Eligible participants

Enrolled students of the graduate (master)-programs in the faculties Medien, Gestaltung and the MediaArchitecture program. Enrolled graduates at the chair Elektroakustische Komposition und Klanggestaltung at the HfM.

Syllabus

• 21.10.2010 Intro lecture
• 28.10.2010 GPS tracking. reading GPS devices with GPSBabel. Editing OSM with Potlach. Editing OSM with JOSM
• 04.11.2010 Basic principles of video motion detection with Pure Data and Gem
• 11.11.2010 understanding video tracking, blobs, colour tracking, marker and markerless systems. Pure Data and Gridflow/PiDiP/openCV
• 18.11.2010
• 25.11.2010
• 04.12.2010 10:00-18:00 Workshop with Frieder Weiß, introduction to eyecon
• 05.12.2010 10:00-18:00 Workshop with Frieder Weiß, advanced eyecon
• 09.12.2010 Evaluation. Assignment with Robert Wechsler:

This workshop focuses on exploring methods of using human motion as a real time controller in interactive installations and performances. It does not concern the sensors, so much as it does the mapping. There are many ways to map a movement-to-media, but the truth is most of them result in pieces that are interactive in name only, that is, they function from a technical standpoint, but fail to give the audience a very strong sense that the action and media are coupled. By looking at the question from a kinesthetic or choreographic standpoint – i.e. what are the parameters of human movement that we care about – we can learn to design interactive pieces that play with spontenaeity and synaesthesia.

• 16.12.2010 Sonificaton. All things Sound.
• 13.01.2011
• 20.01.2011 Assignment results: Part two with Robert Wechsler
• 27.01.2011
• 03.02.2011

Literature

• Link zum Semesterapparat

Links

• Workshop mit Frieder Weiß
• GPS – positioning and mapping
• Mapping
• Bewegungsmelder Tutorial for basic motion detecltion in Pure Data
• Tracking Motion Detection – overview of different motion detection and tracking environments
• Marker tracking – Optical marker (Fiducials) tracking
• GMU:Sensing video – short list of examples in contemporary art
• Other courses dealing with similar topics
  • EXPTV:3D AV-Movement.Media.Mutatus