"헛것 보고 듣는 AI 막는다"...KAIST, 멀티모달 환각 줄이는 기술 개발

한국과학기술원(KAIST, 총장 배충식)은 전기및전자공학부 노용만 교수 연구팀이 멀티모달 모델(LMM)의 감각 혼선을 줄이는 핵심 기술을 개발했다고 31일 밝혔다.연구팀은 카메라와 각종 센서의 특성을 이해하도록 돕는 '센서 이해 AI 최적화(DNA)' 기술과 시·청각 정보가 뒤섞이며 발생하는 환각을 줄이는 '감각 혼선 방지(MAD)' 기술을 개발했다. 각각 영상처리 분야 국제 학술지 'IEEE'와 AI 컴퓨터 비전 국제학회 CVPR에 소개됐다.DNA는 AI가 열화상, 깊이 영상, 엑스레이 등 센서별 물리적 의미를 이해하도록 학습하는