--- tags: '피어세션' --- 211216 피어세션 === - 기록자 : - 오늘의 한마디 진행 해야 될 것 --- - TodoList 리마인더 질문 정리 --- 피어세션 진행 --- - 학습 진행 상황 - 한국어 디코더 - 영어 디코더 - 중국어 디코더 - 학습 된 모델 Knowledge Distillation 방법 - Distillbert 외에 KD 할 수 있는 구현 가능한 방법 - 최종 모델이 3개가 될 경우 - 모델 별로 서버를 올려서 동작하는 코드 구현 - 모델 평가 방법 - 구글 번역기에서 나온 것과 비교해서 eval - 저는 bert 류 모델로 문장의 의미 유사도를 판단해주는거 + BLEU score 같은 지표 + 예시 문장들 내일 까지 계획 --- - 스크럼 전까지 Distillbert를 제외한 KD 구현 방법론 찾아보기 - 피어세션때, 모델 평가 지표 합의 & 발표 준비