19. Naver AI Hackathon 2018
영화 리뷰 평점 예측 / 지식인 질문 유사도 예측의 두 문제로 진행
영화 리뷰 평점: 문장으로 된 영화 리뷰를 보고 점수 예측
지식인 질문 유사도: 두 지식인 질문이 같은 질문인지 아닌지 판별
총 250+명 참여
한 달 동안 총 3라운드로 진행 (Online 2라운드, Offline 1라운드)
30. 모델 서비스 파이프라인 (AS-IS)
NSML에서 모델 학습은 끝냈는데, 다시 서버 구축을 새로 해야한다
혹시 더 좋은 모델을 나중에 발견하면? -> 2번부터 다시 해야 한다
데이터 수집 모델 학습
모델
다운로드
서비스용
서버 구축
Application
연결
31. 모델 서비스 파이프라인 (w/ NSML)
서버 구축까지 NSML에서 대신해주며, 사용자는 앱만 만들면 된다
혹시 더 좋은 모델을 나중에 발견하면? -> 단순히 NSML에 저장되어 있는
모델 이름만 변경하면 새로 구축 끝
데이터 수집 모델 학습
모델
다운로드
서비스용
서버 구축
Application
연결
35. 최고의 튜닝 방법?
- Graduate Student Descent (GSD) Optimization
36. 최고의 튜닝 방법?
- Graduate Student Descent (GSD) Optimization
37. 최고의 튜닝 방법?
최근 기법들
- Population Based Training (Deepmind, 2017)
- Hyperband (CMU, UW, Google, 2016)
- BOHB (University of Freiburg, 2018)
- 그 외 다수 …
38. 다 좋은데...
언제 구현하고, 언제 적용하지…?
어느 최적화 기법이 제일 좋은지 어떻게 알지..?
모델, 알고리즘 연구하기에도 시간이 없는데 ...