저번 월요일에는 이현종 연구원이 Autoencoder based on S4, diffusion model을 활용하여 스파이크 데이터로부터 양질의 latent를 뽑아내고 이를 통해 실제 뇌의 뉴런에서 발생하는 스파이크와 비슷한 스파이킹 패턴을 만들어낼 수 있는 인코더를 …
오늘은 허정윤 연구원이 딥러닝 모델 훈련에 많이 쓰이는 Adam optimizer가 기존의 Stochastic Gradient Descent (SGD)로부터 어떻게 발전되었는지에 대해 다루는 세미나를 진행하였습니다. 기존의 SGD는 훈련 도중 지역 해에 빠지게 된 후 …
오늘은 이훈희 연구원이 federated learning에서 하이퍼 파라미터 세팅의 복잡성 문제를 해결하는 알고리즘을 소개한 논문을 발표했습니다. 기존의 federated learning에서는 하이퍼 파라미터의 설정이 학습 성능에 중요한 영향을 끼쳤었습니다. 하지만 이런 하이퍼 파라미터들을 …