
9월 마지막 주 월요일에는 이현종 연구원이 NeurIPS 2025에 발표된 논문을 세미나 시간에 소개하였습니다. 해당 논문에서는 SNN이 time step의 변화에 따라 서로 다른 내부 상태와 출력을 가진다는 점에 착안해 각 step별 SNN의 상태를 서로 다른 모델로 보고 이 상태들의 출력값을 Knowledge Distillation (KD)을 위해 사용하는 방법을 제안하였습니다. 이 논문에서 SNN이 시간마다 다른 상태를 가진다는 점에 착안하여 이런 새로운 시각을 적용한 것은 매우 흥미로웠습니다. 하지만 이 논문에서 weak한 time step의 SNN이 가지는 출력값에 dark knowledge가 있다고 강하게 주장한 것에 비해 이에 대한 근거를 제대로 제시하지 못한 점은 조금 아쉽게 다가왔습니다.