LLM(초거대언어모델) 등을 활용한 쌍방향 수어 통역 키오스크가 개발됐다. 청각 장애인 건강 문진표 작성은 물론 향후에는 민원 창구에서도 볼 수 있을 전망이다.

한국전자통신연구원(ETRI)은 충남대학교병원, 한국농아인협회, 이큐포올과 공동으로 청각장애인을 위한 양방향 의료 수어 서비스 키오스크를 개발했다고 14일 밝혔다.

연구팀은 키오스크 화면에 아바타를 등장시켜 서로 수어를 주고 받으며 대화할 수 있도록 만들었다.

적용된 기술은 ▲영상인식 기술 ▲인체관절 신호분석 기술 ▲한국어-수어간 양방향 변환기술 등이다.

이한규 미디어지능화연구실 책임연구원은 "키오스크에 탑재된 카메라가 수어자 손 모양을 자동 인식한다"며 "인식률은 60%이지만, 제대로 인식하지 못했을 경우는 반복 작업을 진행하게 된다"고 설명했다.

이 책임연구원은 "이달 초 한국농아인협회와 공동으로 키오스크 서비스 이용 만족도 조사를 진행했다"며 "결과가 아직 나오진 않았지만 참여자 반응은 엄청 좋았다. 일방적인 수어 아바타는 많이 나와 있지만, 쌍방형 수어의 한국어 제공이 드물어 그런 것 같다"고 말했다.

연구팀은 향후 기술 고도화 작업을 통해 다양한 공공서비스 분야로 적용 범위를 확장해 나갈 계획이다.

연구팀은 이 과제가 오는 2026년 마무리되면, 이후 충남대병원과 외래 진료실 등에서 시범 서비스를 구상 중이다. 또 의료 서비스 외에 만원실 등으로 적용 영역을 확장할 계획이다.

이한규 책임연구원은 "민원 서비스 분야로 사업을 확장해 나갈 경우 수어의 단어 쓰임새나 용어 수집 등 학습이 추가로 필요하다"고 덧붙였다.

이태진 미디어연구본부장은 “인공지능 시대에 의료, 생활, 안전 등 필수적인 사회 정보는 누구나 평등하게 접근할 수 있어야 한다"며 "취약계층을 위한 따뜻한 ICT 기술 개발에 대한 지속적인 관심과 노력이 필요하다”고 말했다.

연구는 과학기술정보통신부와 정보통신기획평가원이 지원하는 '청각장애인을 위한 의료현장 양방향 수어 동시통역 서비스 기술 개발' 과제의 일환으로 진행했다.

충남대학교병원, 한국농아인협회, 이큐포올, 한국전자기술연구원, 한국과학기술원 등이 공동 연구기관으로 참여하고 있다.