05.03 피어세션

[loyalsp13]

dense retrieval
EM 0% -> 코드 개선 중

조사 제거 or 양쪽 특수 기호 포함
konlpy kkma 사용 시 성능 best
validation dataset에 대해 reader 성능 대략 10% 상승
모델이 해당 후처리에 대해 스스로 학습하도록 만들기

retrieval top k passage metric
(passage 간 확률 softmax X passage 당 reader 정답 확률)
reader 확률만 고려
-> top 5 성능 향상 확인

dense + sparse retrieval
voting

다른 모델 questionanswering 사용해서 불러오기
pororo model

todo list
baseline code 리뷰
일주일 동안 해본 것들 정리하기
reader model 관련 reference 살펴보기
dense retrieval 구현