字典

概述

本节介绍字典的相关配置。

请在理解各字典相关规范后再进行字典更改。 如果字典更改失败,可能无法访问索引。

列表

要打开下图所示的可管理字典列表页面,请单击左侧菜单中的[系统 > 字典]。

image0

各词典的作用范围与生效时机

每个词典作用的字段和生效的时机都不同。 如果编辑了词典但搜索结果没有变化,请先查看下表。

词典 文件 作用的字段 生效时机
Kuromoji ja/kuromoji.txt content_ja_ja 字段 索引时(需要重新爬取)
同义词 synonym.txt contenttitle 搜索时(无需重新爬取)
映射(各语言通用) mapping.txt contenttitle 索引时(需要重新爬取)
映射(按语言) ja/mapping.txt content_ja_ja 字段 索引时(需要重新爬取)
Protwords en/protwords.txt contenttitle 索引时与搜索时
停用词 en/stopwords.txt contenttitle 索引时与搜索时
Stemmer 覆盖 en/stemmer_override.txt contenttitle 索引时与搜索时

Note

分析器是在打开索引时构建的,因此更新词典文件后 在索引 close / open 之前不会生效。 而且在索引时生效的词典不会追溯应用到已经索引的文档,这些文档需要重新爬取。

Warning

content 字段(大多数搜索由该字段作答)生效的字符替换词典是根目录的 mapping.txt ,而不是 ja/mapping.txt 。二者同名为映射,但是不同的文件。

Kuromoji 用户词典与搜索结果

content 字段使用 standard 分词器和 cjk_bigram 进行分析,因此不受 Kuromoji 形态素切分结果的影响。将日语复合词注册到 Kuromoji 用户词典后重新爬取,对 content 的搜索结果仍然不会改变。注册的效果体现在 content_ja 上,该字段会根据请求的语言 加入到查询条件中。

Kuromoji

管理日语形态素分析用的词典。 ja/kuromoji.txt 是日语形态素分析用词典。

同义词

管理同义词词典。 synonym.txt 是通用于所有语言的同义词词典文件。

映射

管理字符替换词典。 mapping.txt 是通用于所有语言或各语言的单词替换词典文件。

Protwords

管理保护单词词典。 protwords.txt 按各语言配置,是用于排除词干提取等的单词列表文件。

停用词

管理停用词词典。 stopwords.txt 按各语言配置,是在创建索引时排除的单词列表文件。

Stemmer覆盖

管理 Stemmer 覆盖词典。 stemmer_override.txt 按各语言配置,是用于覆盖词干提取处理的单词替换词典文件。