루씬 분석기
루씬 분석기는 최상위 추상클래스로 Analyzer를 사용하고 있고 이를 상속받은 다양한 분석기를 제공받거나 구현받아 사용할 수도 있다. Standard Analyzer 가 영문을 작성할때는 보편적으로 사용할 수 있다고 하는데, 이외에도 불용어만 없애주거나 소문자로만 바꿔주는 분석기도 존재한다. 분석기를 여러개 적용할수도 있으니 작성해서 확인해보면 좋을 것같다. 한중일 아시아 언어를 위한 CJKAnalyzer도 존재하니 한국어 텍스트를 분석할때는 이런걸 써봐도 좋을 것같다.
'TIL' 카테고리의 다른 글
| 2022/10/18 TIL (0) | 2022.10.18 |
|---|---|
| 2022/10/17 TIL (0) | 2022.10.18 |
| 2022/10/11 TIL (0) | 2022.10.12 |
| 2022/10/06 TIL (0) | 2022.10.07 |
| 2022/10/04 TIL (0) | 2022.10.06 |