400 028 6601

建站动态

根据您的个性需求进行定制 先人一步 抢占小程序红利时代

solrschema.xml和solrconfig.xml怎么配置

这篇文章主要介绍“solr schema.xml和solrconfig.xml怎么配置”,在日常操作中,相信很多人在solr schema.xml和solrconfig.xml怎么配置问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”solr schema.xml和solrconfig.xml怎么配置”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

创新互联建站专业成都网站设计、成都做网站,集网站策划、网站设计、网站制作于一体,网站seo、网站优化、网站营销、软文平台等专业人才根据搜索规律编程设计,让网站在运行后,在搜索中有好的表现,专业设计制作为您带来效益的网站!让网站建设为您创造效益。

一、字段配置(schema)

schema.xml位于solr/conf/目录下,类似于数据表配置文件,

定义了加入索引的数据的数据类型,主要包括type、fields和其他的一些缺省设置。

1、先来看下type节点,这里面定义FieldType子节点,包括name,class,positionIncrementGap等一些参数。

  1. < schema name = "example" version = "1.2" >

  2. < types >

  3. < fieldType name = "string" class = "solr.StrField" sortMissingLast = "true" omitNorms = "true" />

  4. < fieldType name = "boolean" class = "solr.BoolField" sortMissingLast = "true" omitNorms = "true" />

  5. < fieldtype name = "binary" class = "solr.BinaryField" />

  6. < fieldType name = "int" class = "solr.TrieIntField" precisionStep = "0" omitNorms = "true"

  7. positionIncrementGap = "0" />

  8. < fieldType name = "float" class = "solr.TrieFloatField" precisionStep = "0" omitNorms = "true"

  9. positionIncrementGap = "0" />

  10. < fieldType name = "long" class = "solr.TrieLongField" precisionStep = "0" omitNorms = "true"

  11. positionIncrementGap = "0" />

  12. < fieldType name = "double" class = "solr.TrieDoubleField" precisionStep = "0" omitNorms = "true"

  13. positionIncrementGap = "0" />

  14.   ... 

  15.   ... 

必要的时候fieldType还需要自己定义这个类型的数据在建立索引和进行查询的时候要使用的分析器analyzer,包括分词和过滤,如下:

view plain print ?

  1. < fieldType name = "text_ws" class = "solr.TextField" positionIncrementGap = "100" >

  2. < analyzer >

  3. < tokenizer class = "solr.WhitespaceTokenizerFactory" />

  4. < fieldType name = "text" class = "solr.TextField" positionIncrementGap = "100" >

  5. < analyzer type = "index" >

  6.    

  7. < tokenizer class = "solr.WhitespaceTokenizerFactory" />

  8.        

  9.        

  10. < filter class = "solr.StopFilterFactory"

  11. ignoreCase = "true"

  12. words = "stopwords.txt"

  13. enablePositionIncrements = "true"

  14. />

  15. < filter class = "solr.WordDelimiterFilterFactory" generateWordParts = "1"

  16. generateNumberParts = "1" catenateWords = "1" catenateNumbers = "1"

  17. catenateAll = "0" splitOnCaseChange = "1" />

  18. < filter class = "solr.LowerCaseFilterFactory" />

  19. < filter class = "solr.SnowballPorterFilterFactory" language = "English"

  20. protected = "protwords.txt" />

  21. < analyzer type = "query" >

  22. < tokenizer class = "solr.WhitespaceTokenizerFactory" />

  23. < filter class = "solr.SynonymFilterFactory" synonyms = "synonyms.txt" ignoreCase = "true"

  24. expand = "true" />

  25. < filter class = "solr.StopFilterFactory"

  26. ignoreCase = "true"

  27. words = "stopwords.txt"

  28. enablePositionIncrements = "true"

  29. />

  30. < filter class = "solr.WordDelimiterFilterFactory" generateWordParts = "1"

  31. generateNumberParts = "1" catenateWords = "0" catenateNumbers = "0"

  32. catenateAll = "0" splitOnCaseChange = "1" />

  33. < filter class = "solr.LowerCaseFilterFactory" />

  34. < filter class = "solr.SnowballPorterFilterFactory" language = "English"

  35. protected = "protwords.txt" />

2、再来看下fields节点内定义具体的字段(类似数据库的字段),含有以下属性:

view plain print ?

  1. < fields >

  2. < field name = "id" type = "integer" indexed = "true" stored = "true" required = "true" />

  3. < field name = "name" type = "text" indexed = "true" stored = "true" />

  4. < field name = "summary" type = "text" indexed = "true" stored = "true" />

  5. < field name = "author" type = "string" indexed = "true" stored = "true" />

  6. < field name = "date" type = "date" indexed = "false" stored = "true" />

  7. < field name = "content" type = "text" indexed = "true" stored = "false" />

  8. < field name = "keywords" type = "keyword_text" indexed = "true" stored = "false" multiValued = "true" />

  9. < field name = "all" type = "text" indexed = "true" stored = "false" multiValued = "true" />

3、建议建立一个拷贝字段,将所有的 全文本 字段复制到一个字段中,以便进行统一的检索:

     以下是拷贝设置:

view plain print ?

  1. < copyField source = "name" dest = "all" />

  2. < copyField source = "summary" dest = "all" />

4、动态字段,没有具体名称的字段,用dynamicField字段

如:name为*_i,定义它的type为int,那么在使用这个字段的时候,任务以_i结果的字段都被认为符合这个定义。如name_i, school_i

view plain print ?

  1. < dynamicField name = "*_i" type = "int" indexed = "true" stored = "true" />

  2. < dynamicField name = "*_s" type = "string" indexed = "true" stored = "true" />

  3. < dynamicField name = "*_l" type = "long" indexed = "true" stored = "true" />

  4. < dynamicField name = "*_t" type = "text" indexed = "true" stored = "true" />

  5. < dynamicField name = "*_b" type = "boolean" indexed = "true" stored = "true" />

  6. < dynamicField name = "*_f" type = "float" indexed = "true" stored = "true" />

  7. < dynamicField name = "*_d" type = "double" indexed = "true" stored = "true" />

  8. < dynamicField name = "*_dt" type = "date" indexed = "true" stored = "true" />

schema.xml文档注释中的信息:

1、为了改进性能,可以采取以下几种措施:

2、< schema name =" example" version =" 1.2" >

3、filedType

< fieldType name =" string" class =" solr.StrField" sortMissingLast =" true" omitNorms =" true" />

可选的属性:

StrField类型不被分析,而是被逐字地索引/存储。

StrField和TextField都有一个可选的属性“compressThreshold”,保证压缩到不小于一个大小(单位:char)

< fieldType name =" text" class =" solr.TextField" positionIncrementGap =" 100" >

solr.TextField 允许用户通过分析器来定制索引和查询,分析器包括一个分词器(tokenizer)和多个过滤器(filter)

name:    字段类型名 
class:    java类名 
indexed:    缺省true。 说明这个数据应被搜索和排序,如果数据没有indexed,则stored应是true。 
stored:    缺省true。说明这个字段被包含在搜索结果中是合适的。如果数据没有stored,则indexed应是true。 
sortMissingLast:    指没有该指定字段数据的document排在有该指定字段数据的document的后面 
sortMissingFirst:    指没有该指定字段数据的document排在有该指定字段数据的document的前面 
omitNorms:    字段的长度不影响得分和在索引时不做boost时,设置它为true。一般文本字段不设置为true。 
termVectors:    如果字段被用来做more like this 和highlight的特性时应设置为true。 
compressed:    字段是压缩的。这可能导致索引和搜索变慢,但会减少存储空间,只有StrField和TextField是可以压缩,这通常适合字段的长度超过200个字符。 
multiValued:    字段多于一个值的时候,可设置为true。 
positionIncrementGap:    和multiValued
一起使用,设置多个值之间的虚拟空白的数量

< tokenizer class =" solr.WhitespaceTokenizerFactory" />

空格分词,精确匹配。

< filter class =" solr.WordDelimiterFilterFactory" generateWordParts =" 1" generateNumberParts =" 1" catenateWords =" 1" catenateNumbers =" 1" catenateAll =" 0"splitOnCaseChange =" 1" />

在分词和匹配时,考虑 "-"连字符,字母数字的界限,非字母数字字符,这样 "wifi"或"wi fi"都能匹配"Wi-Fi"。

< filter class =" solr.SynonymFilterFactory" synonyms =" synonyms.txt" ignoreCase =" true" expand =" true" />

同义词

< filter class =" solr.StopFilterFactory" ignoreCase =" true" words =" stopwords.txt" enablePositionIncrements =" true" />

在禁用字(stopword)删除后,在短语间增加间隔

stopword:即在建立索引过程中(建立索引和搜索)被忽略的词,比如is this等常用词。在conf/stopwords.txt维护。

4、fields

< field name =" id" type =" string" indexed =" true" stored =" true" required =" true" />

< field name =" text" type =" text" indexed =" true" stored =" false" multiValued =" true" />

包罗万象(有点夸张)的field,包含所有可搜索的text fields,通过copyField实现。

< copyField source =" cat" dest =" text" />

< copyField source =" name" dest =" text" />

< copyField source =" manu" dest =" text" />

< copyField source =" features" dest =" text" />

< copyField source =" includes" dest =" text" />

在添加索引时,将所有被拷贝field(如cat)中的数据拷贝到text field中

作用:

< dynamicField name =" *_i" type =" int" indexed =" true" stored =" true" />

如果一个field的名字没有匹配到,那么就会用动态field试图匹配定义的各种模式。

< dynamicField name =" *" type =" ignored" multiValued=" true" />

如果通过上面的匹配都没找到,可以定义这个,然后定义个type,当String处理。(一般不会发生)

但若不定义,找不到匹配会报错。

5、其他一些标签

< uniqueKey > id

文档的唯一标识, 必须填写这个field(除非该field被标记required="false"),否则solr建立索引报错。

< defaultSearchField > text

如果搜索参数中没有指定具体的field,那么这是默认的域。

< solrQueryParser defaultOperator =" OR" />

配置搜索参数短语间的逻辑,可以是"AND|OR"。

二、solrconfig.xml

1、索引配置

mainIndex 标记段定义了控制Solr索引处理的一些因素.

2、查询处理配置

query标记段中以下一些与缓存无关的特性:

query部分负责定义与在Solr中发生的时间相关的几个选项:

概念:Solr(实际上是Lucene)使用称为Searcher的Java类来处理Query实例。Searcher将索引内容相关的数据加载到内存中。根据索引、CPU已经可用内存的大小,这个过程可能需要较长的一段时间。要改进这一设计和显著提高性能,Solr引入了一张“温暖”策略,即把这些新的Searcher联机以便为现场用户提供查询服务之前,先对它们进行“热身”。

query中的智能缓存:

其中filterCache、queryResultCache、Named caches(如果实现了org.apache.solr.search.CacheRegenerator)可以自热。

每个缓存声明都接受最多四个属性:

对于所有缓存模式而言,在设置缓存参数时,都有必要在内存、cpu和磁盘访问之间进行均衡。统计信息管理页(管理员界面的Statistics)对于分析缓存的 hit-to-miss 比例以及微调缓存大小的统计数据都非常有用。而且,并非所有应用程序都会从缓存受益。实际上,一些应用程序反而会由于需要将某个永远也用不到的条目存储在缓存中这一额外步骤而受到影响。

到此,关于“solr schema.xml和solrconfig.xml怎么配置”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注创新互联网站,小编会继续努力为大家带来更多实用的文章!


当前文章:solrschema.xml和solrconfig.xml怎么配置
文章分享:http://www.bluegullmedia.com/article/gdoged.html

其他资讯

让你的专属顾问为你服务

0.0538s