초경량 클래식 형태소 분석기 개발기

카카오톡 특정 기능 구현을 위해 모바일 환경에 적합한 경량 형태소 분석기 개발 경험을 공유하는 글입니다. 모바일 환경에서는 정확도뿐만 아니라 실행 파일 크기, 메모리 사용량, 사전 파일 크기가 중요하며, 이를 위해 전통적인 사전 기반 분석 방식과 Viterbi 알고리즘을 활용했습니다.

또한, 라이브러리 바이너리 크기 제약을 고려하여 Rust와 C++ 중 언어 선택에 대한 고민과 경험을 다룹니다. 특히 Rust의 경우 기본 설정으로도 바이너리 크기가 커지는 경향이 있어 LTO 등의 최적화가 필요함을 시사합니다.