수학과 대학원 석·박사 통합과정에 재학 중인 유준원 학생이(지도교수 정재훈) 이번 ICML 2024 학회에서 논문이 채택되어 포스터 발표를 합니다.

-논문 제목: Do Topological Characteristics Help in Knowledge Distillation?

-저자: Jungeun Kim, Junwon You, Dongjin Lee, Ha Young Kim, Jae-Hun Jung

연구 내용은 지식 증류(Knowledge Distillation, KD)는 큰 (교사)에서 작은 (학생) 네트워크로 지식을 전달하는 것을 목표로 합니다. 선행 연구에서는 지식으로 특징 벡터들의 점 대 점 또는 쌍별 관계에 초점을 맞추고 잠재 공간에서 특성 벡터들이 이루는 관계를 효율적으로 전달하는 데 어려움을 겪고 있습니다. 이 연구에서는 문제를 해결하기 위해 지식으로 잠재 공간의 전역 위상을 전달하는 TopKD라는 새로운 KD 방법을 제안합니다.

학회 일정은 2024년 7월 21일~27일까지이며 발표는 7월 25일 Messe Wien Exhibition Congress Center, Vienna, Austria에서 진행됩니다.