05 Decoding Nature (자연 디코딩)
도쿄 요요기 공원, 고요한 아침입니다.
달리는 사람이 호흡에 맞춰 숲을 가로지르는 순간, 평온했던 나무들은 디지털 신호로 해독(Decoding)됩니다.
시선이 닿는 곳마다 풍경은 글리치와 ASCII 코드로 흩어지고, 시각적 데이터는 즉각적인 소리의 파동으로 치환됩니다.
가장 아날로그적인 숲의 침묵 속에서 발견한, 가장 디지털적인 소음의 기록입니다.
정해진 악보 없이, 오직 자연의 불규칙성과 우연성만이 이 곡의 유일한 테마가 됩니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성 됩니다.
A quiet morning at Yoyogi Park, Tokyo.
As the runner cuts through the woods in rhythm with their breath, the serene trees are decoded into digital signals.
Wherever the gaze lands, the landscape scatters into glitches and ASCII codes, translating visual data into immediate waves of sound.
A record of the most digital noise, discovered within the silence of the most analog forest.
With no fixed score, the irregularity and randomness of nature serve as the sole themes of this piece.
Visual data is analyzed using TouchDesigner, while all sounds are generated via VCV Rack.
(Inspired by TouchDesigner Event Tokyo 2025
Thank you for the community)
장소, Place Yoyogi Park, Tokyo
Made with @touchdesigner, @vcvrack
“Weird is the Point.”
도쿄 요요기 공원, 고요한 아침입니다.
달리는 사람이 호흡에 맞춰 숲을 가로지르는 순간, 평온했던 나무들은 디지털 신호로 해독(Decoding)됩니다.
시선이 닿는 곳마다 풍경은 글리치와 ASCII 코드로 흩어지고, 시각적 데이터는 즉각적인 소리의 파동으로 치환됩니다.
가장 아날로그적인 숲의 침묵 속에서 발견한, 가장 디지털적인 소음의 기록입니다.
정해진 악보 없이, 오직 자연의 불규칙성과 우연성만이 이 곡의 유일한 테마가 됩니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성 됩니다.
A quiet morning at Yoyogi Park, Tokyo.
As the runner cuts through the woods in rhythm with their breath, the serene trees are decoded into digital signals.
Wherever the gaze lands, the landscape scatters into glitches and ASCII codes, translating visual data into immediate waves of sound.
A record of the most digital noise, discovered within the silence of the most analog forest.
With no fixed score, the irregularity and randomness of nature serve as the sole themes of this piece.
Visual data is analyzed using TouchDesigner, while all sounds are generated via VCV Rack.
(Inspired by TouchDesigner Event Tokyo 2025
Thank you for the community)
장소, Place Yoyogi Park, Tokyo
Made with @touchdesigner, @vcvrack
“Weird is the Point.”
04 Pond Serenade (연못의 세레나데)
비가 연못에게 들려주는 감미로운 세레나데. 고요한 수면 위로 떨어지는 빗방울들이 각자의 음표가 되어 하나의 음악을 완성합니다.
비 오는 날, 호암 미술관 연못의 풍경을 영상에 담았습니다. 수면 위로 떨어지는 빗방울들이 만들어내는 작은 파문들을 실시간으로 추적(Blob Tracking)하여 소리로 변환했습니다.
정해진 악보 없이, 오직 자연의 불규칙성과 우연성만이 이 곡의 유일한 테마가 됩니다. 하늘이 물을 어루만지며 연주하는 이 곡은 세상에 단 한 번만 존재하는 순간의 멜로디입니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성됩니다.
A sweet serenade played by the rain for the pond. Raindrops falling onto the quiet surface of the water become individual notes, completing a piece of music.
I captured the scenery of the pond at Ho-Am Art Museum on a rainy day. This work transforms the small ripples created by raindrops into sound through real-time Blob Tracking.
With no set score, the sole theme of this piece becomes the randomness and serendipity of nature. Played as the sky caresses the water, this music is a momentary melody that can exist only once in the world.
The visual data is analyzed with TouchDesigner, and all sounds are generated via VCV Rack.
장소, Place @leeummuseumofart
Made with @touchdesigner @vcvrack
“Weird is the Point”
비가 연못에게 들려주는 감미로운 세레나데. 고요한 수면 위로 떨어지는 빗방울들이 각자의 음표가 되어 하나의 음악을 완성합니다.
비 오는 날, 호암 미술관 연못의 풍경을 영상에 담았습니다. 수면 위로 떨어지는 빗방울들이 만들어내는 작은 파문들을 실시간으로 추적(Blob Tracking)하여 소리로 변환했습니다.
정해진 악보 없이, 오직 자연의 불규칙성과 우연성만이 이 곡의 유일한 테마가 됩니다. 하늘이 물을 어루만지며 연주하는 이 곡은 세상에 단 한 번만 존재하는 순간의 멜로디입니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성됩니다.
A sweet serenade played by the rain for the pond. Raindrops falling onto the quiet surface of the water become individual notes, completing a piece of music.
I captured the scenery of the pond at Ho-Am Art Museum on a rainy day. This work transforms the small ripples created by raindrops into sound through real-time Blob Tracking.
With no set score, the sole theme of this piece becomes the randomness and serendipity of nature. Played as the sky caresses the water, this music is a momentary melody that can exist only once in the world.
The visual data is analyzed with TouchDesigner, and all sounds are generated via VCV Rack.
장소, Place @leeummuseumofart
Made with @touchdesigner @vcvrack
“Weird is the Point”
03 제1의 증인 (The First Witness)
자연재해의 시각적 데이터가 실시간으로 사운드를 생성합니다.
우리는 재난의 중심에 항상 인간을 두지만, 가장 먼저 모든 것을 잃는 것은 그곳에 살던 동식물입니다.
화면 속의 선이 화염과 접촉할 때마다 불편하고 불길한 하모니가 만들어집니다.
배경을 뒤덮는 불의 면적과 강도는 숲의 보이지 않는 구성원들이 내지르는 고통의 비명으로 치환됩니다.
이 사운드는 미리 계획된 것이 아닌, 실시간 제너레이티브 시스템이 기록하는 첫 번째 증언입니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성됩니다.
The visual data of a natural disaster generates sound in real time.
We often place humans at the center of a catastrophe, but it is the animals and plants who lived there that are the first to lose everything.
Each time a line in the frame makes contact with the flames, a dissonant and ominous harmony is created.
The area and intensity of the fire engulfing the background are translated into the agonizing screams of the forest‘s unseen inhabitants.
This audio is not pre-composed; it is the first testimony, recorded by a real-time generative system.
Visual data is analyzed with TouchDesigner, and all sounds are generated through VCV Rack.
Video from Pexels
”Weird is the Point.“
자연재해의 시각적 데이터가 실시간으로 사운드를 생성합니다.
우리는 재난의 중심에 항상 인간을 두지만, 가장 먼저 모든 것을 잃는 것은 그곳에 살던 동식물입니다.
화면 속의 선이 화염과 접촉할 때마다 불편하고 불길한 하모니가 만들어집니다.
배경을 뒤덮는 불의 면적과 강도는 숲의 보이지 않는 구성원들이 내지르는 고통의 비명으로 치환됩니다.
이 사운드는 미리 계획된 것이 아닌, 실시간 제너레이티브 시스템이 기록하는 첫 번째 증언입니다.
시각 데이터는 TouchDesigner로 분석되며, 모든 소리는 VCV Rack을 통해 생성됩니다.
The visual data of a natural disaster generates sound in real time.
We often place humans at the center of a catastrophe, but it is the animals and plants who lived there that are the first to lose everything.
Each time a line in the frame makes contact with the flames, a dissonant and ominous harmony is created.
The area and intensity of the fire engulfing the background are translated into the agonizing screams of the forest‘s unseen inhabitants.
This audio is not pre-composed; it is the first testimony, recorded by a real-time generative system.
Visual data is analyzed with TouchDesigner, and all sounds are generated through VCV Rack.
Video from Pexels
”Weird is the Point.“
02
영상 속 백조의 움직임이 실시간으로 소리를 생성합니다.
백조 한 마리가 선과 접촉하면 하나의 보이스가,
두 마리 이상이 접촉하면 다른 보이스가 더해져 화음을 만듭니다.
선 자체는 고정되어 있거나 움직이며, 이러한 상호작용이 사운드의 트리거가 됩니다.
화면 속 백조의 총 개체 수는 사운드의 전체적인 밀도와 질감을 조절하는 역할을 합니다.
모든 소리는 미리 작곡된 것이 아닌,
실시간 제너레이티브 시스템의 결과물입니다.
TouchDesigner로 시각 데이터를 분석하고,
VCV Rack을 통해 소리로 출력됩니다.
The movement of swans in the video generates sound in real time.
When one swan makes contact with a line, a single voice is triggered.
Contact from two or more adds another voice, forming a chord.
The line itself is either fixed or in motion, and this interaction acts as the sound trigger.
The total number of swans in the frame controls the overall density and texture of the sound.
None of the audio is pre-composed;
it is the output of a real-time generative system.
Visual data is analyzed with TouchDesigner
and output as sound through VCV Rack.
백조 한 마리가 선과 접촉하면 하나의 보이스가,
두 마리 이상이 접촉하면 다른 보이스가 더해져 화음을 만듭니다.
선 자체는 고정되어 있거나 움직이며, 이러한 상호작용이 사운드의 트리거가 됩니다.
화면 속 백조의 총 개체 수는 사운드의 전체적인 밀도와 질감을 조절하는 역할을 합니다.
모든 소리는 미리 작곡된 것이 아닌,
실시간 제너레이티브 시스템의 결과물입니다.
TouchDesigner로 시각 데이터를 분석하고,
VCV Rack을 통해 소리로 출력됩니다.
The movement of swans in the video generates sound in real time.
When one swan makes contact with a line, a single voice is triggered.
Contact from two or more adds another voice, forming a chord.
The line itself is either fixed or in motion, and this interaction acts as the sound trigger.
The total number of swans in the frame controls the overall density and texture of the sound.
None of the audio is pre-composed;
it is the output of a real-time generative system.
Visual data is analyzed with TouchDesigner
and output as sound through VCV Rack.