웹 크롤링 데이터로 구축한 11개 언어 코퍼스의 텍스트 품질 평가

웹 크롤링 데이터로 구축한 대규모 단일 언어 코퍼스의 품질에는 상당한 차이가 있으며, 이러한 품질 차이가 언어 모델 성능에는 큰 영향을 미치지 않는다.