JEJUMA
/

JEJUMA-002

@@ -18,11 +18,12 @@ tags:
 ### 빠르게 사라져가는 지역방언
 * 여러 지역 방언들이 사라지고 있습니다.
 * 지역에 사는 젊은이들도 지역 방언보다는 표준어를 사용하는 경향이 강해지고 있습니다.
-* 특히, 타지역과의 교류가 활발해지면서 젊은 층에선 제주어보단 표준어를 선호하는 현상이 나타납니다.
 ### 지역방언에 약한 언어모델
 * 온라인 소스는 표준어로 구성되어 있기에, 자료가 적은 지역방언을 잘 모릅니다.
 * 특히 제주어는 표준어와 차이가 크기 때문에, 유명한 단어나 문장 외에는 모델이 이해할 수 없습니다.
 ## 어떻게 이를 해결했나요?
 * 언어모델을 통해 어려운 방언을 표준어로 변경하여 방언이 잊혀지지 않도록 합니다.
@@ -31,7 +32,7 @@ tags:
 * 언어모델을 사용한 이유는 기존에 학습된 다양한 내용을 그대로 이어갈 수 있도록 하기 위함입니다.
 ## 개발한 언어모델에 대한 설명
-* 제주도 방언 데이터를 바탕으로 Llama3.1을 다양한 테스크가 가능하도록 파인튜닝하여, 여러 지역 방언과 관련된 여러 테스크를 수행하도록 합니다.
 * `JEJUMA-002`는 현재 방언과 표준어간 변경, 방언 탐지 등의 역할을 수행할 수 있습니다.
 * `JEJUMA-002`를 모델을 훈련하기 위해 약 500만개의 지역방언-서울말 페어 데이터를 수집하고, 그 중 지역방언 잘 들어난 데이터를 평균 15만개씩 총 75만개 선별하였습니다.
 * 이를 바탕으로 총 4가지의 테스크를 수행하도록 훈련 데이터를 확장하였으며, 이는 총 약 200만개의 데이터입니다.

 ### 빠르게 사라져가는 지역방언
 * 여러 지역 방언들이 사라지고 있습니다.
 * 지역에 사는 젊은이들도 지역 방언보다는 표준어를 사용하는 경향이 강해지고 있습니다.
+* 특히, 타지역과의 교류가 활발해지면서 젊은 층에선 방언보단 표준어를 선호하는 현상이 나타납니다.
 ### 지역방언에 약한 언어모델
 * 온라인 소스는 표준어로 구성되어 있기에, 자료가 적은 지역방언을 잘 모릅니다.
 * 특히 제주어는 표준어와 차이가 크기 때문에, 유명한 단어나 문장 외에는 모델이 이해할 수 없습니다.
+* 그 외에 다른 방언들도 점차 억양만 남고 단어들이 소실되고 있습니다.
 ## 어떻게 이를 해결했나요?
 * 언어모델을 통해 어려운 방언을 표준어로 변경하여 방언이 잊혀지지 않도록 합니다.
 * 언어모델을 사용한 이유는 기존에 학습된 다양한 내용을 그대로 이어갈 수 있도록 하기 위함입니다.
 ## 개발한 언어모델에 대한 설명
+* 각 지역 방언 데이터를 바탕으로 Llama3.1을 다양한 테스크가 가능하도록 파인튜닝하여, 여러 지역 방언과 관련된 여러 테스크를 수행하도록 합니다.
 * `JEJUMA-002`는 현재 방언과 표준어간 변경, 방언 탐지 등의 역할을 수행할 수 있습니다.
 * `JEJUMA-002`를 모델을 훈련하기 위해 약 500만개의 지역방언-서울말 페어 데이터를 수집하고, 그 중 지역방언 잘 들어난 데이터를 평균 15만개씩 총 75만개 선별하였습니다.
 * 이를 바탕으로 총 4가지의 테스크를 수행하도록 훈련 데이터를 확장하였으며, 이는 총 약 200만개의 데이터입니다.