정제 및 마크업 관련 조항 예시

정제 및 마크업. 메신저 대화 말뭉치의 활용성을 높이기 위해 시스템 메시지와 같이 화자의 직접 발 화가 아닌 요소와 민감한 개인 정보는 ‘걸러내기(filtering)’나 ‘바꾸기(replacing)’ 등이 용이한 형태로 정제가 필요하다43). 또한 메신저 대화는 사용 기기와 운영 체제(OS), 메 신저 종류에 따라 추출 형식이 상이하기 때문에 이를 표준화하는 과정이 반드시 필요 하다. 이후 마크업 지침44)에 따라 메타 정보 부착과 태깅이 완료되면 1차적인 원시 말 뭉치 구축이 이루어지는 것이다.