SKT "클로드로 만든 텔코 LLM, 고객상담 효율성 높였다"

“앤트로픽 클로드를 파인튜닝한 텔코 LLM 도입으로 고객 상담 시 상담원이 더욱 효율적으로 상담에 필요한 정보를 찾을 수 있게 됐다.”

에릭 데이비스 SK텔레콤 AI테크콜라보레이션 본부장은 지난 19일 서울에서 열린 ‘앤트로픽 코리아 빌더 서밋’에서 클로드 활용 사례로 텔코 LLM 도입 건을 이같이 설명했다.

앤트로픽 코리아 빌더 서밋은 앤트로픽이 AI 제품 분석 플랫폼 운영사 콕스웨이브와 함께 개최한 개발자 행사로, 앤트로픽이 한국에서 처음으로 개최한 공식 행사다.

데이비스 본부장은 이날 패널 토의를 통해 SK텔레콤이 고객센터에 도입한 텔코 LLM의 사례를 소개하며 “고객센터에 적용한 텔코 LLM은 내부 상담원들이 사용하지만 결국 고객들에게 영향을 미치는 서비스”라고 소개했다.

이어, “SK텔레콤은 텔코 LLM을 사용하는 것이 실제로 고객을 만족시킬 수 있는 것인지에 대해 고민했고, 고객 만족도를 높이기 위한 형태로 엔지니어링을 계속 하고 있다”고 설명했다.

사진=SK텔레콤 뉴스룸

SK텔레콤은 지난해 자체 개발 AI 모델 에이닷엑스(A.X)와 클로드 등을 포함, 멀티 LLM을 기반으로 텔코 LLM을 개발해 다양한 사내 운영 업무와 비즈니스에 활용하고 있고 이 가운데 고객센터에는 클로드를 적용한 텔코 LLM이 활용되고 있다.

서밋에 앞서 SK텔레콤은 앤트로픽 블로그를 통해 클로드를 베이스 모델로 파인튜닝된 텔코 LLM의 성과를 알리기도 했다.

SK텔레콤은 고객센터에 텔코 LLM을 적용한 후 고객센터에 적용된 LLM의 저품질 응답 비율이 68% 감소했고, 통화 후처리에서 AI의 응답 품질이 인간 상담원의 약 89% 수준으로 올라왔으며, 고객센터 상담원이 상담에 활용한 후 평가한 점수도 기존 서비스에 비해 34% 높아졌다.

SK텔레콤은 텔코 LLM 고객센터 도입이 상담원들을 지원하고 보조하기 위한 것임을 강조했다.

데이비스 본부장은 “우리의 목표는 사용자의 업무 능력을 보강해 고객센터 상담원들의 스트레스를 줄이고 일하는 즐거움을 찾아주는 것”이라며 “이러한 행위는 궁극적으로 SK텔레콤 가입자의 상담 경험 개선으로 이어져 상담원와 고객 모두에게 도움이 될 것”이라고 밝혔다.

그러면서 “과거에는 고객센터 직원들에게 고객들의 불만 제기에 어떻게 대응하면 좋을지를 교육했다면, 지금은 AI를 활용해 고객이 원하는 것에 대한 정보를 탐색하고 대응하는 데 도움을 주고있다”며 “우리의 AI는 인간을 대체하는 것이 아니고 사람들의 삶의 질을 개선하는 것”이라고 밝혔다.

한편 AI의 발전으로 인한 환경 변화에 대한 질문에 “SK텔레콤은 다양한 기업들과의 협업을 통해 각각의 상황에 따라 알맞은 모델을 활용할 수 있도록 멀티 LLM 전략을 진행하고 더욱 빠르고 더욱 효과적으로 일을 해결할 수 있도록 하고 있다”고 답했다.