05편 · 녹음에 섞인 낮은 소리와 높은 소리를 어떻게 나눌까?

높이가 다른 소리 두 개가 겹치면 파형은 한 줄인데, 단순히 눈으로 보고 둘을 가르기는 어려워요. 저마다 다른 속도로 도는 바늘을 써서 어느 높이가 섞였는지 알아봅니다.

1. 녹음에 섞인 낮은 소리와 높은 소리는 어떻게 나눌까?

라디오와 냉장고가 동시에 윙윙거려도 귀를 기울이면 낮게 울리는 소리와 높게 울리는 소리를 구분할 수 있어요. 컴퓨터는 느린 흔들림부터 빠른 흔들림까지 하나씩 대 보고, 녹음의 숫자들이 그 움직임과 얼마나 잘 맞는지 재요. 이 계산을 DFT라고 해요. FFT는 같은 답을 더 빨리 구하는 계산법이에요. 이렇게 녹음을 통째로 보면 무슨 주파수가 있었는지는 알지만, 언제 나왔는지는 놓쳐요.

천천히 흔들어 비교

  • 낮은 주파수가 얼마나 잘 맞는지 봐요.

빠르게 흔들어 비교

  • 높은 주파수가 얼마나 잘 맞는지 봐요.

원을 도는 바늘. 밑의 j는 제곱하면 −1이 되는 수예요. 여기서는 오른쪽·왼쪽 값과 위·아래 값을 한 쌍으로 적는 데 써요. cos가 가로, sin이 세로, ωt가 바늘이 돈 각도예요. t는 시간, ω는 1초에 얼마나 큰 각도를 도는지예요. 한 바퀴의 4분의 1(π/2)만 돌면 가로는 0, 세로는 1이라 결과는 j예요.

맞는 속도의 바늘 찾기. x[n]은 녹음에서 n번째 값, N은 한 번에 보는 값의 개수예요. k는 이 구간 안에서 바늘이 몇 바퀴 도는지예요. 각 값에 돌려 놓은 바늘을 곱해 더한 것이 X[k]예요. 속도가 맞으면 같은 쪽으로 모이고, 다르면 서로 지워지는 양이 커져요. 예를 들어 x=[1,1,1,1]이면 돌리지 않는 k=0에서 합이 4, 한 바퀴 도는 k=1에서는 네 방향이 서로 지워져 0이에요. 마이너스 부호는 비교하는 바늘을 반대 방향으로 돌리는 약속이에요.

더 깊이 읽기

주파수가 1초에 진동하는 횟수라면, 위상(phase)은 한 주기 안에서 파동이 어느 위치에 와 있는지를 나타내는 시점 정렬이다. 각주파수 ω는 2πf로 정의되며, 허수 단위 j는 j² = -1을 만족한다. 복소 지수 함수 exp(jωt) = cos(ωt) + j sin(ωt)는 소리가 다른 물리적 차원으로 이동하는 것이 아니라, 코사인과 사인이라는 두 직교 성분을 하나의 수학적 묶음으로 간결하게 다루기 위한 표현이다.

이산 푸리에 변환(DFT)은 신호 벡터를 일정한 각속도로 회전하는 기저 벡터와 내적하는 연산이다. 이는 회전목마를 밀 때 회전 속도에 발을 맞춰 힘을 주면 에너지가 누적되고, 엇박자로 밀면 힘이 서로 상쇄되어 0이 되는 원리와 같다. 길이 N = 4인 신호 x = [1, 0, -1, 0]을 예로 들면, k = 0(직류 성분)에서는 네 지점의 가중치가 모두 1이므로 내적값은 1 + 0 - 1 + 0 = 0이다. k = 1 주파수 성분의 복소 회전 가중치는 [1, -j, -1, j]가 된다. 이를 신호와 곱해 더하면 1 × 1 + 0 × (-j) + (-1) × (-1) + 0 × j = 2가 계산된다. 전체 4개 주파수 빈에 대한 DFT 결과는 [0, 2, 0, 2]로 떨어진다. 여기서 k = 3의 결과 2는 또 다른 독립된 가청 주파수가 아니라, 실수 신호의 대칭성에 의해 나타나는 k = 1의 켤레 복소수 음의 주파수 성분이다.

FFT는 같은 DFT를 더 적은 연산으로 구하는 알고리즘이다. 역변환에서는 회전 부호를 바꾸고 결과를 표본 수로 나눈다. 반올림 오차를 빼면 원래 파형이 돌아온다.

한 번 더 계산해 보기

입력이 실수이면 음의 주파수 쪽은 양의 주파수 쪽을 뒤집어 켤레복소수를 취한 값이다. 0 Hz를 포함해 표본 수의 절반을 내림하고 1을 더한 칸만 보관하면 된다. 표본 수가 짝수라면 나이퀴스트 칸도 실수다.

참고 문헌

이어서 읽기

곡 한 곡에 무슨 음이 있었는지 아는 것과, 각각 언제 나왔는지 아는 건 달라요. 녹음을 짧게 나눠 보면 언제 어떤 주파수가 강했는지 알 수 있어요.