15편 · 말하는 동안 바뀌는 입 모양을 어떻게 계산할까?
움직이는 혀를 사진 여러 장으로 나눠 보듯, 논문은 말을 짧은 구간으로 나눠요. 한 구간에서는 입 모양을 거의 고정한 채 주파수별로 계산해요.
1. 말할 때 움직이는 관을 어떻게 계산할까?
움직이는 입 모양을 한꺼번에 계산하는 대신, 녹음을 짧게 잘라요. 한 조각을 계산하는 동안은 입 모양이 거의 그대로라고 보는 거예요. 그 안에서 주파수마다 따로 계산한 뒤 한 조각의 소리로 합쳐요. 마지막에는 이웃 조각의 겹치는 부분을 더해 다시 이어 붙입니다. 이제 남은 건 그 조각에서 관을 지나는 소리를 계산하는 일이에요.
- 잠깐 멈춤
한 구간만 입 모양을 고정해요.
- 따로 계산
주파수마다 어떻게 바뀌는지 구해요.
- 다시 잇기
구간들이 겹치는 곳을 더해 소리를 이어요.
식 (20): 흐름 대신 압력만 보기. 식 (1)의 첫 줄을 시간으로 한 번 더 미분하고 둘째 줄을 끼워 넣으면, 시간에 따른 유량 변화가 사라지고 압력만 남아요. A는 위치마다 다를 수 있으니 공간 미분 ∂ₓ 안에 둬요. 예를 들어 넓이가 같은 빨대에선 A를 양쪽에서 지울 수 있지만, 한쪽이 오므라든 관에선 그럴 수 없어요.
식 (21)과 (2): 바늘 하나로 바꾸기. p와 u를 주파수 하나만 골라 크기와 늦어지는 정도까지 적으면 P와 U예요. ω는 각주파수(1초 동안 도는 각도), j는 제곱이 −1인 수예요. 논문의 부호 약속에서 시간 미분 한 번은 −jω를 곱하고, 두 번은 −ω²를 곱해요. 그래서 (21)에서는 자리 변화만 풀면 되고, (2)는 압력과 유량을 두 값으로 남겨 계산하는 형태예요.
더 깊이 읽기
단면적 형상이 순간적으로 변하지 않는 짧은 시간 동안 공기 유량 u를 소거하면 단면적이 변하는 관에 대한 웹스터 혼 방정식인 식 (20)을 얻습니다. 만약 단면적이 일정한 곧은 원통 관이라면 흔히 접하는 표준 1차원 파동 방정식으로 단순화됩니다. 시간에 따라 주기적으로 진동하는 성분을 e^(−jωt) 형태로 표현하면 시간 미분 ∂/∂t는 −jω를 곱하는 연산이 되고 두 번 미분한 ∂²/∂t²은 −ω²을 곱하는 연산으로 바뀝니다. 이를 대입하여 유도하면 식 (21)과 식 (2)가 나타납니다. 식 (2)에서는 시간 미분에서 나온 마이너스 부호와 식 내부의 마이너스 부호가 상쇄되어 두 공간 미분 항 모두에 +jω 인수가 붙습니다.
반면 부록과 고속 푸리에 변환(FFT) 구현부에서는 e^(+jωt) 시간 규약을 채택하여 미분 연산자가 +jω로 바뀝니다. 두 규약은 부호 정의가 정반대이므로 분석과 합성 단계에서 혼용하지 않아야 합니다. 주파수 영역 합성(FDS) 방식은 공간 축의 행렬 곱을 시간마다 독립적으로 풀지 않고 독립된 주파수 빈 단위로 병렬 계산합니다.
공개 코드는 32 kHz 샘플링 속도에서 800개 샘플(25 ms) 크기의 창을 사용하고 200개 샘플(6.25 ms) 간격으로 이동합니다. 분석 단계에서는 양 끝을 완만하게 깎아주는 튜키(Tukey) 창을 적용하고 합성 단계에서는 한(Hann) 창을 적용하여 겹치는 프레임들을 추가적인 정규화 상수 없이 그대로 더해 최종 연속 파형을 복원합니다. 창 하나를 계산하는 동안에는 관 모양을 고정한다. 다음 창을 계산할 때는 새 단면적을 쓴다.
유도와 가정 더 보기
주파수가 높아질수록 파장이 짧아져 관의 가로 방향을 무시하기 어려워진다. 4 kHz는 모델의 가정을 설명하는 기준이지, 그 위에서 갑자기 파동이 바뀌는 경계가 아니다. 하지만 공개 구현체는 계산 복잡도를 낮추면서 음성 합성 품질을 실용적으로 확보하기 위해 동일한 1차원 행렬 전송 방식을 16 kHz 나이퀴스트 주파수 영역까지 확장하여 사용합니다.
참고 문헌
이어서 읽기
고무 벽이 달린 관에서는 공기가 직진할 뿐 아니라 벽도 흔들어요. 압력과 유량을 전압과 전류처럼 적으면 두 가지 일을 한 식에 넣을 수 있어요.