한국어 토크나이저 — 단어 분리·형태소 분절

바른 토크나이저란?

바른 토크나이저는 한국어 문장을 형태소·어절 단위로 분절하는 자연어 처리 도구입니다. 검색 엔진 색인, 챗봇 전처리, 텍스트 마이닝 등 다양한 분야에서 한국어 텍스트를 정확하게 토큰화합니다.

bareun's tokenizer splits Korean sentences into morphemes and words with POS tagging, for search indexing, chatbot preprocessing, and text mining, and is available via REST API.

주요 기능

• 형태소·어절 단위 실시간 분절
• 품사 태깅(POS tagging) 지원
• 도메인별 사용자 사전 적용
• REST API로 서비스에 바로 통합

자주 묻는 질문