解説記事
全文検索では、検索語と文書側の 単語(トークン) が一致して初めて検索がヒットします。そのため、テキストをどのようにトークンへ分割するかが検索品質を直接左右します。Fess は OpenSearch(または Elasticsearch)を検索エンジンとして採用しており、これらは Apache Lucene をベースにしています。単語の分割には、この Lucene が提供する Analyzer という機能が使われます。
【第5回】全文検索のトークナイズ処理 を参照してください。
関連項目
Fessの解説記事 - 第6回:日本語の全文検索におけるAnalyzer