Sparse and Decorrelated Representations for Stable Zero-shot NMT by 카카오 엔터프라이즈
- Using a single encoder and decoder for all directions and training with English-centric data is a popular scheme for multilingual NMT
- as the model degenerates by decoding non-English texts into English regardless of the target specifier token
- We present that enforcing both sparsity and decorrelation on encoder intermediate representations with the SLNI regularizer efficiently mitigates this problem
if (kakao)2020 기술 세션 다시보기 by 카카오
- 올해는 카카오톡 10주년을 맞이하여 기술(dev) 외에도 비즈니스/서비스/파트너 등 여러 분야의 세션을 준비했습니다
- 한편으로 그동안의 개발자 컨퍼런스와 달리 카카오의 기술 세션만을 쉽게 찾아보기가 어려웠다는 피드백이 있었습니다
- 카카오 CTO인 메이딘으로부터 올해 컨퍼런스에서 준비한 개발 세션에 대한 요약과 추천 세션을 포함해