[FEAT] Korquad 데이터셋 fine-tuning

[ohbigkite]

🏞️ Background

• korquad 데이터셋의 경우, train 데이터셋과 유사한 MRC 데이터셋입니다. pre-trained 모델에 대회 데이터셋을 fine-tuning하는 것보다는, 유사한 korquad 데이터셋으로 fine-tuning 한 후, 대회 데이터셋으로 전이학습을 해주면 성능이 향상될 것이라고 판단하여, roberta-large를 korquad 데이터셋으로 fine-tuning 하고자 했습니다.

📝 To do

• korquad 데이터셋 전처리 : korquad 데이터셋의 경우, train 데이터보다 지문 길이가 긴 데이터 존재하므로 해당 데이터 filtering
• roberta-large fine-tuning 진행
• hugging face에 모델 업로드