딥러닝 robust 의미

딥러닝 관련 논문이나 글을 읽다보면, robust 라는 용어가 나오는데, 문자 그대로는 해석이 어렵다. 결론부터 말하자면, AI 분야에서 robust의 의미는 모델이 노이즈에 크게 영향을 받지 않는다는 의미이다.

 

Robust의 사전적 의미

Robst의 사전적 의미 (출처: 네이버 영어사전)

AI에서 Robust의 의미

AI 분야에서 모델이 Robust하다는 것은, 모델이 튼튼하고 강력하다는 의미

=~ 입력 데이터의 이상치나 노이즈에 민감하게 흔들리지 않는다

=~ 학습한 데이터 세트에 과적합(overfitting)되지 않았다

 

예시

Overall β-VAE tends to consistently and robustly discover more latent factors and learn cleaner disentangled representations of them than either InfoGAN or DC-IGN.

(β-VAE: LEARNING BASIC VISUAL CONCEPTS WITH A CONSTRAINED VARIATIONAL FRAMEWORK 일부 발췌)

 

β-VAE는 전반적으로 infoGAN이나 DC-IGN 보다 더 많은 잠재 요인(=latent factor)을 일관되고 강력하게 발견하고,
더 깨끗하게 얽히지 않은(=disentagled) 표현을 학습하는 경향이 있다.

=> 다른 안정적이지 못한 모델에 비해서 잠재 요인을 일관성있게 안정적이게 발견한다는 의미로 쓰임