ETRI, 쌍방향 수어통역 가능한 '키오스크' 개발

LLM(초거대언어모델) 등을 활용한 쌍방향 수어 통역 키오스크가 개발됐다. 청각 장애인 건강 문진표 작성은 물론 향후에는 민원 창구에서도 볼 수 있을 전망이다.

한국전자통신연구원(ETRI)은 충남대학교병원, 한국농아인협회, 이큐포올과 공동으로 청각장애인을 위한 양방향 의료 수어 서비스 키오스크를 개발했다고 14일 밝혔다.

연구팀은 키오스크 화면에 아바타를 등장시켜 서로 수어를 주고 받으며 대화할 수 있도록 만들었다.

적용된 기술은 ▲영상인식 기술 ▲인체관절 신호분석 기술 ▲한국어-수어간 양방향 변환기술 등이다.

이한규 미디어지능화연구실 책임연구원은 "키오스크에 탑재된 카메라가 수어자 손 모양을 자동 인식한다"며 "인식률은 60%이지만, 제대로 인식하지 못했을 경우는 반복 작업을 진행하게 된다"고 설명했다.

이 책임연구원은 "이달 초 한국농아인협회와 공동으로 키오스크 서비스 이용 만족도 조사를 진행했다"며 "결과가 아직 나오진 않았지만 참여자 반응은 엄청 좋았다. 일방적인 수어 아바타는 많이 나와 있지만, 쌍방형 수어의 한국어 제공이 드물어 그런 것 같다"고 말했다.

연구팀은 향후 기술 고도화 작업을 통해 다양한 공공서비스 분야로 적용 범위를 확장해 나갈 계획이다.

연구팀은 이 과제가 오는 2026년 마무리되면, 이후 충남대병원과 외래 진료실 등에서 시범 서비스를 구상 중이다. 또 의료 서비스 외에 만원실 등으로 적용 영역을 확장할 계획이다.

이한규 책임연구원은 "민원 서비스 분야로 사업을 확장해 나갈 경우 수어의 단어 쓰임새나 용어 수집 등 학습이 추가로 필요하다"고 덧붙였다.

이태진 미디어연구본부장은 “인공지능 시대에 의료, 생활, 안전 등 필수적인 사회 정보는 누구나 평등하게 접근할 수 있어야 한다"며 "취약계층을 위한 따뜻한 ICT 기술 개발에 대한 지속적인 관심과 노력이 필요하다”고 말했다.

관련기사