kochat ) 데이터셋(intent, entity)

데이터셋 저장경로 "root/data/raw"

 

intent

각 인텐트 단위로 파일을 분할

파일명과 intent명이 동일

파일명은 한글로 해도 상관 없긴 하지만, 리눅스 운영체제의 경우 시각화시 matplotlib에 한글폰트가 설치되어있지 않다면 글자가 깨지니, 가급적이면 시각화를 위해 영어로 하는 것을 권장

 

entity - 라벨

 

 

라벨링 오류

오류 1

파주 유명한 공연장 알려줘,S-LOCATION O S-PLACE O

파주 유명한 공연장 알려줘 - question에 해당

S-LOCATION O S-PLACE O - label에 해당

 

question과 label의 크기는 동일해야함(크기는 띄어쓰기로 구분된 텍스트의 개수)

그렇지 않으면 오류 메시지 발생

 

오류 2

kochat_config 파일 내에 있는 DATA 코드 안에 있는 정보로 라벨링을 진행해야 함

그렇지 않으면 오류 메시지 발생

 

OOD

OOD란?

Out of distribution의 약자로, 분포 외 데이터셋을 의미

즉, 현재 챗봇이 지원하는 기능 이외의 데이터를 의미

 

OOD 저장경로 - "root/data/ood"