소리의 시각화

융합의 시대를 살아가는 엔지니어들과 아티스트들을 위한 지침서

 융합기술 시리즈를 저술하면서 꼭 다루고 싶었던 주제 중의 하나가 ‘소리의 시각화’였습니다. 대표적 감각기관인 시각과 청각을 융합하는 것은 기술 분야에서 아주 오래전부터 다뤄온 주제였고 인터랙티브 아트에 있어서는 가장 흥미로운 주제이며 피타고라스 이후의 많은 수학자와 물리학자에게 소리를 기하학과 접목하는 일은 지적 탐구의 대상이 되어 왔습니다. 소리와 기술을 다루는 저 역시도 ‘소리의 시각화’라는 주제는 늘 흥미롭고 관심이 가는 주제였습니다.

이 책을 통하여 ‘소리의 시각화’에 대한 이론적 설명과 구현을 통한 경험을 독자 여러분께 전달할 수 있으리라 생각하며 융합의 시대를 살아가는 엔지니어들과 아티스트들 모두에게 어렵지 않게 쉽게 접근할 수 있는 책이 될 것이라는 생각에 즐거운 마음으로 한 문장 한 문장을 써 내려갔습니다.

이 책을 통해 여러분만의 상상으로 다양한 패치를 만들고 실험하며, 국내에서 조금 생소한 비주얼 뮤직(Visual Music)이나 뉴미디어를 활용한 미디어 아트 혹은 인터랙티브 뮤직(Interactive Music) 분야에서 이 책이 많이 활용되었으면 합니다.

‘소리의 시각화’에 대한 이론적 설명과 구현을 통한 경험을 독자에게 전달하는 이 책을 통해 여러분들의 상상으로 다양한 패치를 만들고 실험하며, 아직까진 국내에서 조금 생소한 비주얼 뮤직(Visual Music)이나 뉴미디어를 활용한 미디어 아트 혹은 인터랙티브 뮤직(Interative Music) 분야에서 이 책이 많이 활용되기를 기대합니다.
  

지은이 : 채진욱
어린 시절부터 컴퓨터와 기술을 좋아하고 음악에 열광하며 사운드를 사랑해서 학부에서는 물리학을 전공하며 음향학을 공부하였고 대학원에서는 컴퓨터 공학(DSP)을 전공하며 컴퓨터를 이용한 소리 합성을 연구하였다. KURZWEIL Music Systems에서 사운드 엔지니어로 일하며 다양한 신시사이저를 개발하였고 Native Instruments Reaktor 5의 DSP 개발에 참여하기도 하였다.

14년간 대학에서 사운드와 신시사이저, 컴퓨터 음악을 강의하였으며 경기대학교 전자 디지털 음악학과에서 겸임교수로 일하며 너무나 소중한 제자들을 만나는 행운을 얻기도 하였다. 미국의 스타트업 회사에서 인공지능을 사운드와 접목하는 연구를 담당하였고 지금은 ㈜SMRC의 기술이사로 재직하며 인공지능 음악 엔진을 개발하고 있다.

저서로는 『아두이노 for 인터랙티브 뮤직』(인사이트), 『Octave/MATLAB으로 실습하며 익히는 사운드 엔지니어를 위한 DSP』(씨아이알), 『FAUST를 이용한 사운드 프로그래밍』(씨아이알)이 있다.

지은이 : 김수정 
어린 시절 노래가 흘러나오면 길거리라도 멈춰서 흥얼거리며 춤을 췄다고 한다. 좋아하는 음악을 직접 만들어보겠다는 열망 하나로 경기대학교 예술대학 전자디지털음악학과에 입학하였고, 미국 미시간 주립 대학교(MSU) 음악대학에서 3학기 동안 교환학생 시절을 보냈다. 교환학생 시절 듣는 음악에서 보는 음악으로의 관심이 많아져 학부 졸업 후 이화여자대학교 공연예술대학원에서 음악공학을 전공하며 영상음악에 대해 공부하였고, 다수의 예능, 다큐, 광고, 게임 등의 BGM 및 사운드 작업에 참여하였다.

<로스트(Lost)에 나타나는 마이클 지아키노의 드라마 음악 특징 연구>라는 국내 최초의 미국 드라마 음악 분석 논문으로 석사학위를 받았으며, 현재는 영화, 연극 등 다양한 매체와 함께할 수 있는 음악을 작곡하며 성남시청소년재단하에 청소년들의 작곡 진로 멘토로도 활동하고 있다. 앞으로는 보고 듣는 것을 넘어서 체험할 수 있는 뉴미디어 음악 분야에 대한 연구를 계획하고 있다.

CHAPTER 01 개 요
1.1 소리의 시각화에 대한 기본 개념
1.2 퓨어 데이터(Pure Data) 소개 및 설치

CHAPTER 02 음량에 대한 정보 추출하기
2.1 레벨 미터(Level Meter)
 2.2 스코프(Scope, Waveform)

CHAPTER 03 음고(음높이)에 대한 정보 추출하기 
3.1 레벨 미터를 이용하여 음고에 대한 정보 나타내기
3.2 스코프를 이용하여 음고에 대한 정보 나타내기

CHAPTER 04 음색에 대한 정보 추출하기
4.1 레벨 미터를 이용하여 음색에 대한 정보 나타내기
4.2 스코프를 이용하여 음색에 대한 정보 나타내기

CHAPTER 05 GEM을 이용한 도형 제어하기 1
 5.1 도형의 선택(모양):소리에 따라 도형의 모양 바꾸기
5.2 도형의 크기:소리에 따라 도형의 크기 바꾸기

CHAPTER 06 GEM을 이용한 도형 제어하기 2 
 6.1 도형의 위치:소리에 따라 도형의 위치 바꾸기
6.2 도형의 색:소리에 따라 도형의 색 바꾸기
6.3 반복되는 패턴의 도형

CHAPTER 07 입체도형 
7.1 입체적으로 앞뒤로 움직이는 구(조명 이용하기)
7.2 입체도형의 종류
7.3 소리 요소로 입체도형 제어하기

CHAPTER 08 파티클(Particle)
 8.1 음색에 따라 불꽃이 튀는 효과
8.2 소리의 3요소에 따라 회전하며 앞뒤로 움직이는 별과 파티클

CHAPTER 09 이미지(Image) 
 9.1 Pd에서 이미지를 불러오기
9.2 불러온 이미지를 변형하기
9.3 소리의 3요소로 이미지 제어하기

CHAPTER 10 동영상(Video) 
 10.1 기존의 동영상 파일을 불러오는 법
10.2 카메라를 이용하여 실시간으로 영상을 받아오는 방법
10.3 소리의 3요소로 동영상 제어하기

CHAPTER 11 리사주 도형(Lissajous Figure) 
 11.1 진폭이 다른 두 개의 사인파로 만들어지는 리사주
11.2 주파수가 다른 두 개의 사인파로 만들어지는 리사주 패턴
11.3 위상이 다른 두 개의 사인파로 만들어지는 리사주 패턴
11.4 [ scopeXYZ ] 객체를 이용한 리사주 도형 만들기
11.5 음악을 리사주 도형으로 표현하기
11.6 소리의 요소(음색)로 리사주 도형 표현하기

CHAPTER 12 Pd 사용에 유용한 팁들 
12.1 도움말(Help)의 활용
12.2 Pure Data 관련 서적 소개
12.3 서브 패치의 활용
12.4 나만의 객체 만들기