[수다] AI에 한국 법과 제도 관련 문제 돌리면 정확도 60퍼나옴

요즘 그런 대회 있거든 정부기관에서 AI써서 법 제도 전문 AI 만드는 대회같은거 있는데 그 질문 리스트들 그냥 쌩짜 지피티에 싹다넣어서 답변 쭉뽑아갖고 채점해보면 61점 나오고 그럼

일단 한국어 쓰면 그냥 성능 떨어지고, 한국 법이라는 특수한 도메인 관련 지식 묻는거인 이상 걍 법조문 싹다떼와서 RAG라고 아무튼 법전을 보고 답하게 만드는 장치를 써야 겨우 68점 이럼.

생각보다 그리 좋진 않음 내생각엔 한국어 쓰는데서 오는 성능너프가 젤쎈것같음. 애초에 한국어 토큰처리를 어케하는지도 모르긴 하는데