1.4.2 (Jan 19, 2021)

새로운 기능

• train: 누락된 NV 용언추정범부 레이블 추가
• train: 학습과정에서 과정에 어절 구분자를 +에서 컨트롤 문자로 변경
• manual: 매뉴얼에 모두의 말뭉치 표시
• manual: docker hub overview 정보 변경
• evaluate: 내부 테스트 포맷에서 기존 tei 포맷 지원

결함 및 개선

• compound-noun: 복합명명사 검토 범위에 NR, SH, SL, SN 제외
• service: 실행 시점에 라이센스 관련 정보 출력 삭제
• train: f1-score 계산시 0으로 나누는 문제
• segment: 세셔 분절 조건 추가, -시 앞에 -어가 올 수 있는 경우
• golang 1.15로 업그레이드, 바이너리 크기 축소
• client: 샘플 클라이언트 출력시 긴 어절인 경우 공백없음 발생, 20글자 이상인 경우
• evaluate: 토큰#힌트#힌트 중복으로 출력되는 버그

학습데이터 세부 수정 사항

• 모두의 말뭉치: 이/VCP 관련 태깅 오류 수정
• 모두의 말뭉치: 전수 조사 중 발견한 오류 사항
• 모두의 말뭉치: 구어 오류 수정
• '이/VCP+EC/라고'를 '라고/JKQ'로 수정, 인용을 의미하는 동사 앞에서
• '이/VCP+EC/라'를 '라/JKQ'로 수정, 인용을 의미하는 동사 앞에서
• 수사 관련 수정 태깅 오류 수정
• 소수/SN 정리
• 한소리 한뜻 수정 (수사 관련 수정)
• 기존 학습데이터에서 "+"를 모두 "\uff0b" ＋로 표기한 문제, 원복
• 잇딴 -> 잇딸+ㄴ = 잇딸다, 잇달다의 이형태로 처리
• 요, 이요 관련 오류 정리
• 몇/MMN 을 몇/NR 로 수정
• EC+EF, EC+EF 연달아 오는 경우(#599)
• NR+NR 을 하나의 NR 로 수정
• 가+자+하+ㄹ지
• 어절에 + 기호가 들어있는 경우에 대한 처리
• 한차례/NNG 를 한/MMN+차례/NNG 로 수정
• 한/XPN+바탕/NNG 로 수정
• 한고비/NNG 를 한/XPN+고비/NNG 로 수정
• 한마디/NNG 로 수정
• 요/JX --> 이/VCP+오/EF, 이/VCP+요/EC
• 나요 --> 나/NP+이/VCP+오/EF 추가
• 언제요, 나요, 저요 수정
• 뭐요, 왜요 수정
• 이/VCP+오/EF --> 요/EC
• 요/EF --> 요/JX, 시요 --> 시/EP+오/EF 등 수정
• 용언뒤 요/EF --> 아요/EF, 어요/EF
• NV 태깅 복원, 모두의 말뭉치 기준