Dynamic Mapping和常见字段类型

时间:2023-03-08 23:37:41
Dynamic Mapping和常见字段类型

原文:Dynamic Mapping和常见字段类型

版权声明:本文为博主原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。

什么是Mapping

  • mapping类似数据库中的schema的定义,作用如下:
    • 定义索引中的字段的名称
    • 定义字段的数据类型,例如字符串、数字、布尔…
    • 字段,倒排索引的相关配置,Analyzed or Not Analyzed,Analyzer
  • mapping会把JSON文档映射成Lucene所需要的扁平格式
  • 一个mapping属于一个索引的type
    • 每个文档都属于一个Type
    • 一个Type有一个Mapping定义
    • 7.0开始,不需要在mapping定义中指定type信息

字段数据类型

  • 简单类型
    • Text/Keyword
    • Date
    • Integer/Floating
    • Boolen
    • ipv4 & ipv6
  • 复杂类型 - 对象和嵌套对象
    • 对象类型/嵌套类型
  • 特殊类型
    • geo_point & geo_shape & percolator

什么是Dynamic Mapping

  • 在写入文档时候,如果索引不存在,会自动创建索引
  • Dynamic Mapping 的机制,使得我们无需手动定义Mappings。Elasticsearch会自动根据文档信息,推算出字段的类型
  • 但是有时候会推算的不对,例如地理位置信息
  • 当类型如果设置不对时,会导致一些功能无法正常运行,例如:Range查询
查看Mapping



  • 1

类型的自动识别

JSON类型 Elasticsearch类型
字符串 1、匹配日志格式,设置成Date 2、配置数字设置成float或者long,该选项默认关闭 3、设置为Text,并且增加keyword 子字段
布尔值 boolean
浮点数 float
整数 long
对象 Object
数组 由第一个非空数值的类型所决定
空值 忽略

能否更改Mapping的字段类型

  • 两种情况
    • 新增字段
      • Dynamic 设为true时,一旦有新增字段的文档写入,Mapping也同时被更新
      • Dynamic 设为false时,Mapping 不会被更新,新增字段的数据无法被索引,但是信息会出现在_source中
      • Dynamic设置成Strict,文档写入失败
    • 对已有字段,一旦已经有数据写入,就不再支持修改字段定义
      • Lucene实现的倒排索引,一旦生成后,就不允许修改
    • 如果希望改变字段类型,必须Reindex API,重建索引
  • 原因
    • 如果修改了字段的数据类型,会导致已被索引的属于无法被搜索
    • 但是如果是新增新的字段,就不会有这样的影响

控制Dynamic Mappings

“true” “false” “strict”
文档可索引 YES YES NO
字段可索引 YES NO NO
Mapping被更新 YES NO NO
PUT movies
{
"mappings":{
"_doc":{
"dynamic":"false"
}
}
}
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 当dynamic被设置成false时候,存在新增字段的数据写入,该数据可以被索引,但是新增字段被丢弃
  • 当设置成Strict模式时候,数据写入直接出错

相关文章