기계의 음성인식 원리

It's me : 심심타파

글 수 1,097

좋은글 조회 수 1444 추천 수 0 2011.07.22 08:24:19

chanyi https://enjoyenglish.co.kr/humor/305910

알리바바와 40인의 도둑 이야기에 나오는 신기한 동굴의 문은 ‘열려라. 참깨’라는 말에 문이 열린다. 옛날부터 사람들은 사람 아닌 물건, 혹은 동물들이 사람 말을 알아듣는 이야기를 많이 만들어냈는데, 이것이야말로 궁극의 상상력이 아닐까 싶다. 하지만, 정작 사람은 아무 불편 없이 다른 사람 말을 듣고 이해하는 것으로 보아, 분명히 그 속에는 말을 이해하는 원리가 있을 것이고, 오늘날에는 그 원리를 이용한 음성인식 제품들이 많이 만들어지고 있다.

사람이 소리를 내는 원리

우리가 소리를 알아듣는 방법을 이해하기 위해서는, 우선 사람이 소리를 내는 방법을 알아야 한다. 우리가 소리를 내면, 공기를 매질로 한 파동이 만들어지고, 그 파동은 듣는 사람의 귀 고막을 두드리는 것으로서 음성 정보를 전달하게 된다. 그럼, 사람은 소리를 어떻게 내는 것일까? 첫 번째 단계는, 횡격막이 수축하면서 허파 속의 공기가 밖으로 나오게 된다. 이때 목에 있는 성문(聲門)을 지나게 되는데, 성문에는 성대(聲帶)라는 한 쌍의 주름이 있다.

우리가 ‘아~’라는 음을 발성하면서 손을 목에 대었을 때 진동을 느끼게 되는데 바로 그 부분이 성대가 떨리고 있는 부분이다. 그럼 왜 그곳에서는 진동이 발생하게 될까? 우리는 지하철 플랫폼에서 전동차가 막 지나갈 때, 플랫폼 쪽에서부터 철로 방향으로의 힘을 느끼게 되는데, 이것은 베르누이의 정리때문에 발생하는 일이다. 사람의 성문에서도 그런 현상이 발생한다. 공기가 성문을 지나게 될 때 그 부분의 압력이 낮아지고, 힘은 압력이 높은 곳에서 낮은 곳으로 향하므로 그 결과 양옆에 있는 성대들이 서로 부딪히게 된다. 성문에서 발생하는 이러한 사건들은 사람의 목소리에 어떤 영향을 주는 것일까? 바로 음의 높낮이(pitch)를 결정하게 된다. 우리가 공기를 빠르게 보내면 압력이 더 낮아지고, 성대들이 서로 부딪히는 속도는 빨라지며 음의 높이는 높아지게 된다.

그럼, 실제 ‘아’, ‘어’와 같은 소리의 언어적 정보는 어디에서 만들어지는가? 성대에서 입술과 콧구멍까지의 통로를 성도(聲道)라고 부르는데 바로 이 성도를 지나면서 여러 가지 음이 만들어지게 된다. 성도의 상태, 즉 입을 크게 벌렸는지 작게 벌렸는지, 혀끝이 윗잇몸에 붙었는지 아닌지와 같은 여러 가지 상태에 따라서 다양한 소리가 나오게 된다.

성도(성대에서 입술 또는 콧구멍에 이르는 통로)의 시상단면(矢狀斷面)
<출처 : wikipedia>

음성 파형으로부터 언어 정보를 추출하는 방법

‘카’라고 발성했을 때의 음성 파형

위에 보이는 그림은 ‘카’라고 발성했을 때의 음성 파형이다. 위 그림에서 0.13초까지 ‘ㅋ’ 음에 해당하는 음성 파형이고 그 이후부터는 ‘아’ 음에 해당한다. ‘ㅋ’과 ‘아’ 음소(音素) 파형 중 ‘아’ 파형을 관찰해보면 시간 축 상에서 커다랗게 나타나는 피크 (peak)들이 보이는 것을 알 수 있다. 바로 이 피크들의 간격을 주기라고 말하고 이 시간 차이가 성대가 떨리는 주기와 일치하게 된다. 한편 ‘ㅋ’ 파형은 그런 피크들이 보이지 않는데 성대가 떨리지 않고 난류를 일으킨 무성음이기 때문이다. 그럼 음성 인식기는 위 음성 파형으로부터 어떻게 어떤 말인지 알아낼까?

음성 인식기는 음성 파형이 주어지게 되면, 매 1/100 초 단위로 그 시점에 있는 약 0.02초 정도 길이의 음편(音片)을 가져와서 분석하게 된다. 그 짧은 길이의 음성 파형은 여러 단계의 신호 처리를 거치게 되고 최종적으로 10개 이상의 숫자들이 나오게 되는데, 이 숫자들은 바로 그 시점에서의 성대와 성도의 상태를 나타내는 숫자들이다. 좀 더 쉽게 설명하면, 그 시점에서의 성대 진동 횟수와 입 모양을 그릴 수 있는 숫자들이다. 한편, 음성 인식 측면에서 보면, 사람은 어떠한 음높이의 ‘학교’라는 말을 들어도 모두 ‘학교’라는 언어 정보를 추출한다. 즉, 성대의 진동 주기는 언어 정보와 무관하다. 그러므로 그 숫자 중에서 성대 진동과 관련된 숫자들은 버리고 더이상 사용하지 않는다. 위의 이야기를 비유적으로 설명하면 다음과 같이 요약할 수 있다. 성문에서부터 입까지 찍는 특수한 사진기가 있다고 가정하고 그 사진기는 초당 100회 사진을 찍게 된다. 음성 인식은, 그 사진들을 시간 축으로 나열해 놓고 어떤 말일까 계산하는 과정이다.

연속 음성 인식기의 원리

음성인식 기술은 그 기술의 난이도에 따라 ‘고립 단어 인식’과 ‘연속 음성 인식’으로 크게 나뉜다. 예를 들어 인식 대상 어휘가 ‘서울’, ‘부산’ 두 개라고 가정하자. 이때 전자는 ‘서울’과 ‘부산’ 딱 두 개 어휘만 인식하는 기술이고, 후자는 이 두 개 어휘의 모든 조합, 즉 ‘서울 서울’, ‘서울 부산 서울’과 같이 어떠한 길이의 어휘 조합도 모두 인식하는 기술이다. 당연히 후자가 더 어려운 기술이다. 그리고 사람과 같은 수준의 음성 인식기를 개발하고자 한다면, 후자의 기술이 사용되어야 한다. ‘연속 음성 인식’을 수학식으로 표현하면 아래와 같다.

음성 인식을 위해서는 당연히 소리를 우선 들어야 하고, T 시간까지 발성된 음성이라면 이 음성은 라고 쓰자. 다음 단계는, 어떤 말일까 예측을 해야 하는데 그 말이 몇 개의 단어로 되어 있는지 모르므로 이라고 쓰고 여기서 m은 단어의 수가 된다. 첫 번째 식의 의미는, 음성이 주어졌을 때 모든 단어 조합에 대해서 가장 확률적으로 가능성이 큰 단어 열이 바로 우리가 찾고 싶은 단어 열이고 그것이 음성인식의 결과 이라는 의미이다.

위에서 첫 번째 식은 베이즈 정리 (Bayes’ Theorem)에 의해서 두 번째 식이 되고, 는 해당 음성 자체가 입력될 확률인데 이 값은 어떤 단어 열을 선택하든 언제나 분모로 있으므로 전체 식에 영향을 주지 않아 제거할 수 있다. 마지막 식에서 을 음향 모델(acoustic model)이라고 부르고 을 언어 모델(language model)이라고 부르는데, 이 두 모델의 확률 곱이 최대가 되는 이 우리가 찾고 싶은 최종 결과이다.

그럼, 두 모델의 의미는 무엇일까? 우선 을 보면 음성 파형을 의미하는 가 없다. 즉, 파형을 보지도 않고 그 음성이 무엇일까 예측하는 확률이다. 예를 들어, 오늘이 올림픽 개최일이라고 가정하자. 그렇다면, 사람들은 아마도 ‘올림픽’이라는 단어를 사용할 가능성이 클 것이다. 그러므로 누군가 무슨 말을 했는데 그 말을 맞추어야 한다면, ‘올림픽’ 아니냐고 이야기하는 것이 가장 합리적인 생각일 것이다. 정리하면 은 사람이 발화 시점에 어떤 단어들을 말할 확률을 미리 계산해서 가지고 있는 값이다. 두 번째로 은 단어 ‘올림픽’을 발성했을 때 해당 음성이 발성될 확률을 의미한다. 예를 들어 네 살배기 어린아이가 ‘올림픽’을 발성하는 것과 성인이 발성하는 것, 그리고 성우가 발성하는 것은 쉽게 생각해도 음의 명료성에서 크게 차이가 있을 것이다. 어린아이가 발성한 ‘올림픽’은 ‘올림’이 ‘우리’처럼 들려서 어쩌면 ‘우리 엄마’에 가깝게 들릴지도 모르고, 그러면 가 보다 더 높은 확률값을 가지게 된다.

빠르게 인식하는 방법

위 음성 인식 수식을 보면, 모든 후보가 되는 단어 열에 대한 확률을 모두 구해야 하고 그 중 가장 높은 확률을 낸 단어 열을 선택하게 되어 있다. 한편, 단어 열 길이에 대해 제한이 없으므로, 상식적으로 생각해도 우리가 찾아야 하는 탐색 공간은 무한대가 되어 버린다. 그러므로 어떻게 빠르게 단어 열을 찾을 것인가가 중요한 문제가 된다. 이에 대한 해결책은 매우 단순하다. 모든 후보 단어 열에 대한 가능성을 열어두고 음성을 듣다가 정답이 아닐 것 같은 후보들을 탈락시키는 것이다. 마치 축구에서 토너먼트 경기를 하면서 한 팀씩 탈락하는 것처럼, 음성을 들으면서 가능성이 없는 후보는 빨리 탈락시킨다. 음성 신호가 모두 처리되었을 때는 그 험한 경쟁에서 살아남은 최종 승리자가 최종 인식 결과가 된다.

글 이상호 / NHN 기술연구팀 팀장: KAIST에서 한국어 문서-음성 변환 시스템에서의 운율 생성 모델로 박사학위를 받은 후, LG에서 음성 인식기 개발에 참여했으며, 현재는 네이버 음성 검색 시스템을 개발하는 기술연구팀에서 근무하고 있다.

발행일 2011.03.24

원문출처 : http://www.soonpeng.co.kr/index.php?document_srl=1045166

이 게시물을

엮인글 :

List of Articles

번호	제목	글쓴이	조회 수	날짜
공지	심심타파 잼있는 글 많이 올려 주세요....(냉무) [1]	Chanyi	10517	2003-06-10
Learn Korean with Video - 5 Must-Know Korean Words 2 koreanculture 조회 수 299 Learn Korean with Video - 5 Must-Know Korean Words 2 http://www.KoreanClass101.com/video Learn Korean with KoreanClass101.com! Now that you have lived in Korea for awhile, you want to travel out of the city and see things. You notice that the people that live even in the next city have different Korean accents and words for things. You are glad that you know some Korean words that make sense no matter what city you are in -- words that everyone is sure to know, even you! This lesson looks at 5 m... 2011-07-21
좋은글 기계의 음성인식 원리 chanyi 조회 수 1444 알리바바와 40인의 도둑 이야기에 나오는 신기한 동굴의 문은 ‘열려라. 참깨’라는 말에 문이 열린다. 옛날부터 사람들은 사람 아닌 물건, 혹은 동물들이 사람 말을 알아듣는 이야기를 많이 만들어냈는데, 이것이야말로 궁극의 상상력이 아닐까 싶다. 하지만, 정작 사람은 아무 불편 없이 다른 사람 말을 듣고 이해하는 것으로 보아, 분명히 그 속에는 말을 이해하는 원리가 있을 것이고, 오늘날에는 그 원리를 이용한 음성인식 제품들이 많이 만들어지고 있다. 사람이 소리를 내는 원리 우리가 소리를 알아듣는 방법을 이해하기 위해서는,... 2011-07-22
좋은글 3D영화의 원리 chanyi 조회 수 12265 입체 영화라고도 하는 3D 영화는 의외로 오랜 역사를 가지고 있다. 1800년대 중반부터 사진이나 그림을 입체적으로 볼 수 있는 장치를 만들어 즐기기 시작했으며 1922년에 최초의 상업용 3D 영화로 알려진 ‘the power of love'가 상영되기에 이르렀다. 1950-60년대 매우 활발하게 제작되었던 3D 영화는 침체기를 지나 2000년대 컴퓨터 기술의 힘으로 새로운 시대를 열고 있다. 사람이 보는 세계는 모두 3차원이다. 그러나 영화관의 스크린에 펼쳐지는 영상은 깊이가 없는 면으로 이루어진 2차원이다. 그런데 3D 영화의 영상은 우리가 마치... 2011-07-22
좋은글 목표는 크게 잡아라~ [1] chanyi 조회 수 574 위대한 기업을 세우고자 한다면 위대한 꿈을 가질 용기가 있어야 한다. 작은 꿈을 꾼다면 어떤 작은 것을 이루는 데는 성공할 것이다. 많은 사람이 그것에 만족한다. 하지만, 광범위한 영향력과 영구적인 가치를 얻고 싶다면, 담대해져라. (If you want to build a great enterprise, you have to have the courage to dream great dreams. If you dream small dreams, you may succeed in building something small. For many people, that is enough. But if you want to achieve widespread impact and lasting value, be bold.) -하워... 2011-07-22
좋은글 명상의 대중화 chanyi 조회 수 471 명상의 대중화 생각은 좋은 생각과 나쁜 생각이 있습니다. 상상도 마찬가지입니다. 하지만, 명상은 좋고 나쁨이 없습니다. 명상은 긍정적이고 좋은 말입니다. 그래서 좋은 사람, 좋은 세상이 되려면 누구나 명상을 하고 명상이 대중화된 사회가 되어야 합니다. 명상상태에서는 생명의 실체를 바라볼 수 있고, 자신의 영혼은 물론 다른 사람의 영혼을 느낄 수 있습니다. 생명의 가치와 소중함이 가슴으로 느껴집니다. 삶 속에서 위험을 벗어날 길은 평소에 선한 일을 많이 하고 좋은 생각과 좋은 상상을 많이 하는 것입니다. 평소에 다른 사... 2011-07-22
좋은글 입보다 귀를 상석에 귀를 상적에 앉혀라 chanyi 조회 수 540 인간이 입으로 망한 적은 있어도 귀로 망한 적은 없다. 유대인의 속담에는 수다를 경계하는 걱정이 있다. 그러나 그런 속담이 많다고 해서 귀찮게 여기지 말고 그만큼 그것이 중요한 문제라고 생각하여라. 입은 자신을 주장한다. 귀는 다른 사람의 주장을 듣는다. 물론 인간이 말이 없는 것도 좋은 것은 아니다. 자신을 주장하지 않고 살아갈 수 없기 때문이다. 인간에게 있어서 에고(ego) (자신을 남에게 강요하려는 것)은 강하다. 그래서 인간은 수다를 떨게 되는 것이다. 따라서 아무튼 수다를 경계한다고 하더라도 그것은 결코 지나친 ... 2011-07-23
좋은글 태풍을 이기는 우산이라네요! [有] chanyi 조회 수 606 영상올리는 법을 몰라서요 ㅠ.ㅠ 링크로 대신... 누가 좀 알려주셔용~ http://www.youtube.com/watch?v=hFzOwq5PldQ&feature=player_embedded#t=186s 원문출처 : http://www.soonpeng.co.kr/index.php?document_srl=1084468 2011-07-23
좋은글 스타벅스 에서 원두 구매하실때의 팁!!!! chanyi 조회 수 913 물론 이미 아시는 분도 있을지도 모르지만.. 모르시분이 있을지도 모르니까요.... 던킨 에서는 원두를 사면..일정한 크기로만 분쇄가 됩니다....(조절이 안대는듯....) 별다방에서는 원두를 구매할때... 원두 한봉지를.... 두가지 종류의 굵기로도 나누어서...분쇄 가능합니다.. 드립용과...모카포트용....이라 해야 할지.. 원두는 ...굵게 분쇄될수록...연한 커피가 추출되므로 두가지 로..갈아오셔서 드셔 보시는것도 좋으실듯...싶네요.. 원문출처 : http://www.soonpeng.co.kr/index.php?document_srl=1109941 2011-07-25
심심타파 영어 공교육 관련 -- (조삼모사 패러디) chanyi 조회 수 913 그림출처: http://diarix.tistory.com/253 2011-07-26
좋은글 브라를 권장한 역사적 배경 chanyi 조회 수 1043 브라는 원래 가슴을 지탱하기 위해서, 아님 기분 좋게 자극하기 위해서 착용하게 된 걸까? 중학교 때, 나의 합창선생님께서는 우리들에게 불어로 어떻게 국가를 부르는지 가르쳐 주셨다. 그런데 우리들이 어떤 단락의 가사를 잘 기억하게 하기 위해: “Car ton bras sait porter l'epee,” 그녀는 말했다. “브라가 어떤 역할을 한다고? 그건 지탱해주는 거 야. 그러니 “sait porter”는 “bras” 다음에 오는 거란 걸 기억하도록!”(번역 주: 원래 노 래 가사의 의미는 “왜냐면 당신의 팔이 검을 드는 걸 알기 때문에.”지만 영어 ‘브라’를 비... 2011-07-29
좋은글 살 못 빼는 사람들의 21가지 특징 chanyi 조회 수 1006 먹는 것과 관련된 7가지 특징 - 밥을 자주 거른다. 특히 아침을 자주 거른다. - 밤에 무언가를 자주 먹는다 - 귀찮아서 저녁은 주로 외식을 한다. - 과일이나 아채를 잘 먹지 않는다. - 군것질을 자주, 꾸준히, 많이 한다. - 많이 먹는 것을 좋아한다. - 좋은 식습관과 나쁜 식습관의 사이를 자주 오간다. (꾸준한 식습관을 유지하지 못한다.) 운동과 관련된 7가지 특징 - 움직이지 않고 앉아서 지내는 것을 좋아한다. (Couch Potato라고 불리는 사람들입니다.) - 운동에 잘 참여하지 않으려고 한다. - 한가지 운동을 꾸준히 하지 못하고 ... 2011-07-29
좋은글 서울 지하철 빨리 갈아타는 법 chanyi 조회 수 820 [충정로역] 2호선에서 5호선 타려면 : 뒤에서 2번째 칸 2번째 문 5호선에서 2호선 타려면 : 뒤에서 3번째 칸 2번째 문 [신도림역] 2호선에서 국철 타려면 :(잠실행) 뒤에서 4번째 칸 두 번째 문 (신촌행) 앞에서 4번째 칸 두 번째 문 의정부행 국철 에서 2호선 타려면 : 뒤에서 4번째 칸 제일 앞 문 수원.인천행 국철에서 2호선 타려면 : 앞에서 5번째 칸 2번째 문 용산행 국철에서 2호선 타려면 : 앞에서 4번째 칸 3번째 문 부평행 국철에서 2호선 타려면 : 뒤에서 5번째 칸 4번째 문 2호선(잠실행)에서 2호선 가지선(까치산역행) 타려면 ... 2011-07-29
좋은글 당뇨 상식，바로 알고 치료하자 chanyi 조회 수 905 ▷ 당뇨병은 유전이다?당뇨병이 생기는 원인에 유전적인 요소도 있긴 하다. 하지만 가족 중 한사람에게 당뇨병이 있다고 해서 모두가 당뇨에 걸리는 것은 아니다. 유전적인 소인이 있어도 스트레스를 줄이면서 규칙적인 운동과 소식을 하면 당뇨를 예방할 수 있다. ▷ 설탕을 먹으면 당뇨에 걸린다?단 음식을 많이 먹는다고 해서 당뇨병이 생기는 것은 아니다. 하지만 단 음식을 즐기다 보면 뚱뚱해지기 쉽고, 살이 찌게 되면 당뇨병이 생길 가능성이 높아진다. 당뇨병에 걸릴까봐 단 음식을 피할 이유는 없지만 적당히 먹는 것이 건강에 좋... 2011-07-29
심심타파 대한민국 청소년 모의국제회의 코리아타임즈 조회 수 718 안녕하세요 대한민국 청소년 모의 국제회의 (KYIA)에 여러분을 초대합니다 코리아타임스 국제교류원에서 2010 G20 정상회의를 기념하여 청소년 토론문화의 선진화를 도모하고 21C 글로벌 리더십을 갖춘 인재를 양성하고자 KYIA(한국어대회)를 개최합니다. 세계경제에 있어 중요한 국가간의 경제 및 금융 정책 현안에 관화 대화를 확대하고, 세계 경제 성장을 위한 협력을 증대시키기 위해 출범한 G20 정상회의를 여러분이 직접 각 국가의 정상급이 되어 1위원회 ~ 14위원회에 해당되는 위원회 주제를 Crisis로 설정하여 참석한 의장국의 입... 2011-08-02
좋은글 Rock 신은공평하다. chanyi 조회 수 1755 1. 신은 지미 페이지에게 젊은시절 최고의 섹쉬 & 간지 포스를 주셨지만, 나이들어서는 전혀 닮지않은 동양인 옆집 아저씨의 포스를 주셨다. (ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ) 2. 신은 알렉시 라이호에게 어린 나이부터 찬사를 듣게 만든 범상치 않은 음악적 재능, 멋진 외모와 함께 수작으로 평가받는 그의 앨범을 선사하셨지만 자기 마누라는 행복하지 못하게 만드셨다. 3. 신은 알렉시라이호에게는 멋있는얼굴과 엘라스틴을 주셨지만 싸가지가 없다는이유로 엘라스틴을 뺏어가시고 한번에30년을 늙게만드셨다. 저주받은 신체와 벽돌같은 ... 2011-08-12

번호

제목

글쓴이

조회 수

날짜