Chapter 4-1 BERT의 파생모델 1 ALBERT, RoBERTa

[emphasis10]

발표 나누기
4.1 ~ 4.2 ALBERT @mori8
4.3 RoBERTa @emphasis10

Part 2 BERT 파생 모델의 첫 chapter입니다. 이번 chapter부터는 발제자들은 필수로 해당 발표 내용에 대한 논문을 읽어서 발표에 함께 참고해주시고 다른 분들도 최대한 논문을 읽으면 더 유익한 시간이 될 수 있을 것 같습니다. 해당 논문들은 비교적 최신의 논문들도 아니고, 워낙 유명한 논문들이어서 한국어로 된 논문 리뷰도 많은 편입니다. 논문 자체가 부담이 된다면 한국어 논문 리뷰를 읽어보시는 것도 좋습니다.

ALBERT 논문
RoBERTa 논문