통화 녹음 요약 AI는 어떻게 작동하나: 녹음·전사·요약의 흐름

통화 녹음 요약 AI는 세 단계로 작동합니다. 먼저 통화를 녹음하고, 통화가 끝나면 음성 인식(STT)이 녹음을 글자로 옮기는 전사를 하고, 마지막으로 언어 모델(LLM)이 그 글을 읽고 용건, 결과, 해야 할 일을 짧게 정리하는 요약을 만듭니다. 요약 모델은 소리를 직접 듣지 않고 전사된 글을 읽기 때문에, 녹음 품질과 전사 정확도가 요약 품질의 출발점입니다.

실시간으로 대답해야 하는 AI 전화 응대와 달리, 통화 요약은 통화가 끝난 뒤 처리되므로 속도보다 정확성을 우선할 수 있습니다. 한국AI통신은 사업자용 제로콜과 개발사용 KAT Cloud 두 서비스에서 통화 녹음과 요약을 제공합니다. 이 글은 그 일반적인 흐름과 활용법을 정리합니다.

세 단계를 한눈에

1단계: 녹음

녹음은 요약의 원재료입니다. 전화 통화는 고객 쪽 음성과 상대(AI나 직원) 쪽 음성이 서로 다른 방향으로 흐르므로, 두 방향을 따로 담을 수 있다면 나중에 "누가 말했는가"를 구분하기 쉽습니다. 한 채널로 섞어 녹음하면 전사 단계에서 목소리로 화자를 추정해야 해서 오류가 늘어납니다.

통화를 녹음한다면 통화 시작 시 녹음 사실을 알리는 것이 일반적입니다. 녹음과 개인정보에 관한 일반적인 내용은 통화 녹음과 개인정보에서 다룹니다.

2단계: 전사

전사는 녹음을 대화 텍스트로 바꾸는 단계입니다. 실시간 응대용 음성 인식은 빠르게 결과를 내야 하지만, 통화 뒤 전사는 녹음 전체를 앞뒤 문맥과 함께 처리할 수 있어 정확도에 더 유리합니다.

그래도 전화 음성의 한계는 남습니다. 8kHz 협대역 음질, 숫자와 고유명사, 두 사람이 겹쳐 말한 구간에서 오류가 생기기 쉽습니다. 원인과 대응은 한국어 전화 음성인식이 어려운 이유에서 정리했습니다.

KAT Cloud의 경우 받아쓰기 결과가 AI가 응대한 구간(sttAI)과 직원이 응대한 구간(sttDirect)으로 나뉘어 통화 기록에 담기고, 요약은 summary에 담깁니다. 화자와 구간이 구분된 형태라 뒤 단계에서 활용하기 쉽습니다.

3단계: 요약

요약은 언어 모델이 전사된 대화를 읽고 핵심을 정리하는 단계입니다. 좋은 통화 요약은 문장을 줄이는 것이 아니라 업무에 필요한 항목을 뽑아내는 것입니다.

• 용건: 고객이 왜 전화했는가
• 결과: 통화에서 무엇이 정해졌는가(예약 확정, 접수, 미해결)
• 후속 조치: 누가 무엇을 해야 하는가(콜백, 견적 발송)
• 핵심 값: 날짜, 시각, 금액, 연락처

업종마다 필요한 항목이 다르므로 요약 지시문을 업무에 맞게 정하면 활용도가 크게 올라갑니다. 학원이라면 학년과 과목, 부동산이라면 매물과 희망 조건을 뽑게 하는 식입니다.

제로콜에서는 통화가 끝나면 녹음이 저장되고, 음성 인식으로 대화 내역이 만들어진 뒤, 언어 모델이 요약을 만들어 통화 기록에 붙입니다. 통화 상세 화면에서 요약, 녹음, 대화 내용을 함께 볼 수 있습니다.

요약의 한계를 알고 쓰기

• 오류는 앞에서 뒤로 전파됩니다. 전사에서 "삼시"가 "사시"로 바뀌면 요약도 4시로 정리합니다.
• 요약은 해석입니다. 고객이 애매하게 말한 것을 모델이 단정적으로 정리할 수 있습니다.
• 짧을수록 빠지는 것이 있습니다. 한두 줄 요약에는 부가 요청이 생략될 수 있으므로 상세 화면에서 전체를 확인합니다.

개인정보와 보관

통화 녹음과 전사, 요약에는 이름, 연락처, 주소, 때로는 민감한 내용이 담깁니다.

1. 1필요한 것만 남깁니다. 업무에 필요한 기간만 보관하고 기간이 지나면 삭제하는 정책을 둡니다.
2. 2접근을 제한합니다. 녹음과 전사를 볼 수 있는 사람을 역할별로 정합니다.
3. 3외부 처리를 확인합니다. 전사나 요약을 외부 모델 제공사가 처리한다면 어떤 정보가 어디로 가는지 개인정보처리방침에서 확인합니다.
4. 4민감한 구간은 처음부터 남기지 않습니다. 결제 정보를 입력하는 구간은 녹음과 음성 인식을 멈추는 방식이 안전합니다.

보안 원칙은 한국에이아이통신(주)의 보안 페이지에서 확인할 수 있습니다.

요약을 업무에 연결하기

요약은 기록 화면에 머물 때보다 일하는 곳으로 흘러갈 때 가치가 커집니다.

• 콜백 목록: 미해결 통화의 요약을 모아 담당자에게 아침마다 전달합니다.
• 메신저 알림: 예약이나 접수가 생기면 요약을 팀 메신저로 보냅니다.
• CRM 기록: 고객별 상담 이력에 요약을 쌓아 다음 통화 때 참고합니다.

KAT Cloud는 통화가 끝나 요약까지 완료되면 웹훅으로 결과를 보내거나 통화 기록 API로 조회할 수 있어 자체 시스템과 연결하기 쉽습니다. 요약을 품질 평가에 쓰는 방법은 보이스 에이전트 품질 평가를 참고하세요.

자주 묻는 질문

통화 요약은 통화가 끝나자마자 바로 나오나요?

통화 요약은 녹음 저장, 전사, 요약을 차례로 거쳐 만들어지므로 통화가 끝난 뒤 처리 시간이 조금 걸립니다. 실시간 응대와 달리 녹음 전체를 처리하는 방식이라 정확도에 유리하며, 처리가 끝나면 통화 기록에 붙거나 웹훅 같은 방식으로 전달됩니다.

통화 요약이 틀릴 수도 있나요?

통화 요약은 틀릴 수 있습니다. 전사 단계에서 숫자나 이름을 잘못 인식하면 요약에도 그대로 반영되고, 언어 모델이 애매한 표현을 단정적으로 정리하거나 원문에 없는 표현을 덧붙이는 경우도 드물게 있습니다. 중요한 값은 원문 전사나 녹음으로 확인하는 것이 좋습니다.

한국AI통신 서비스에서 통화 요약을 쓰려면 어떻게 하나요?

한국AI통신의 제로콜을 쓰면 앱이나 웹 콘솔에서 통화 녹음과 요약을 바로 확인할 수 있고, 개발사라면 KAT Cloud의 통화 기록 API와 웹훅으로 받아쓰기와 요약을 자체 시스템에 연동할 수 있습니다. 이용 조건과 요금은 각 서비스 사이트에서 확인하세요.