elasticSearch-索引详解-映射详解

电玩女神 2022-12-10 10:21 371阅读 0赞

### 文章导航 ###

*  mapping 映射定义
 *  mapping type废除说明
 *  字段类型介绍
 *   *  字段类型datatypes:
 *  字段定义属性介绍
 *  Multi Fields 多重字段
 *  元字段介绍
 *  动态映射

# mapping 映射定义 #

> 映射定义索引中有什么字段,字段的类型等结构信息.  
> 类比数据库中的表结构定义  
> ES中,支持手动定义映射,动态映射两种方式

示例:

/*
    映射定义后续是可以进行修改的
    */
    PUT testmapping
    {
    "mappings" : {
      "properties" : {
        "field1" : { "type" : "text" }
        }
      }
    }

# mapping type废除说明 #

1.  从6.0.0开始限定仅包含一个映射类别定义,兼容5.x中的多映射类别
2.  从7.0开始移除映射类别
3.  多个映射类别转变为多个索引

> ES最先的设计是用索引类比关系型数据库的数据库,mapping type 类比 数据库表, 一个索引中可以包含多个映射别.  
> 这种类比存在一个严重的问题,如果当多个mapping type中存在同名字段,而且同步字段还是不同的类型时,在一个索引中就会不好处理.因为索引引擎中只有 索引 - 文档的结构,换句话说,数据库关系型数据库中，表之间是相互独立的。一个表中的列与另一个表中同名的列没有关系。然而在映射类型中有相同名称字段的不同映射类型是由同一个字段支持的,  
> 即相当于user表中的user\_name和member表中的user\_name是存储在同一个字段上的

**Maaping映射示例:**

PUT twitter
    {
      "mappings": {
        "_doc": {
          "properties": {
            "type": { "type": "keyword" }, 
            "name": { "type": "text" },
            "user_name": { "type": "keyword" },
            "email": { "type": "keyword" },
            "content": { "type": "text" },
            "tweeted_at": { "type": "date" }
          }
        }
      }
    }

# 字段类型介绍 #

## 字段类型datatypes: ##

> 字段类型定义了该如何索引存储字段值.  
> 官网: [https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-types.html][https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-types.html]

<table> 
 <thead> 
  <tr> 
   <th>核心类型</th> 
   <th>示例</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>string</td> 
   <td>text and keyword</td> 
  </tr> 
  <tr> 
   <td>Numeric datatypes</td> 
   <td>long, integer, short, byte, double, float, half_float, scaled_float</td> 
  </tr> 
  <tr> 
   <td>Date datatype</td> 
   <td>date</td> 
  </tr> 
  <tr> 
   <td>Boolean datatype</td> 
   <td>boolean</td> 
  </tr> 
  <tr> 
   <td>Binary datatype</td> 
   <td>binary</td> 
  </tr> 
  <tr> 
   <td>Range datatypes</td> 
   <td>integer_range, float_range, long_range, double_range, date_range</td> 
  </tr> 
 </tbody> 
</table>

…

# 字段定义属性介绍 #

> 字段的type(Datatype)定义了如何索引存储字段值, 还有一些属性可以让我们根据需要来覆盖默认的值或进行特别定义  
> 官网: [https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-params.html][https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-params.html]

<table> 
 <thead> 
  <tr> 
   <th>字段</th> 
   <th>作用</th> 
   <th>字段</th> 
   <th>作用</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>analyzer</td> 
   <td>指定分词器</td> 
   <td>ignore_malformed</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>normalizer</td> 
   <td>指定标准化器</td> 
   <td>index_options</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>boost</td> 
   <td>指定权重值</td> 
   <td>index</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>coerce</td> 
   <td>强制类型转换</td> 
   <td>fields</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>copy_to</td> 
   <td>值复制给另一字段</td> 
   <td>norms</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>doc_values</td> 
   <td>是否存储docValues</td> 
   <td>null_value</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>dynamic</td> 
   <td></td> 
   <td>position_increment_gap</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>enabled</td> 
   <td>字段是否可用</td> 
   <td>properties</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>fielddata</td> 
   <td></td> 
   <td>search_analyzer</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>eager_global_ordinals</td> 
   <td></td> 
   <td>similarity</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>format</td> 
   <td>指定时间值的格式</td> 
   <td>store</td> 
   <td></td> 
  </tr> 
  <tr> 
   <td>ignore_above</td> 
   <td></td> 
   <td>term_vector</td> 
   <td></td> 
  </tr> 
 </tbody> 
</table>

# Multi Fields 多重字段 #

> 当我们需要对一个字段进行多种不同方式的索引时, 可以使用fields多重字段定义.  
> 如一个字符串字段即需要进行text分词索引,也需要进行keyword关键字索引来支持排序,聚合  
> 或者需要用㓊分词器进行分词索引

// city,raw这2个是自定义的
    PUT my_index
    {
      "mappings": {
        "_doc": {
          "properties": {
            "city": {
              "type": "text",
              "fields": {
                "raw": { 
                  "type":  "keyword"
                }
              }
            }
          }
        }
      }
    }

添加数据

PUT my_index/_doc/1
    {
      "city": "Beijing"
    }

PUT my_index/_doc/1
    {
      "city": "Shanghai"
    }

查询

GET my_index/_search
    {
      "query": {
        "match": {
          "city": "beijing" 
        }
      },
      "sort": {
        "city.raw": "asc" 
      },
      "aggs": {
        "Cities": {
          "terms": {
            "field": "city.raw" 
          }
        }
      }
    }

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center]

# 元字段介绍 #

> 元字段是ES中定义的文档字段  
> 官网: [https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-fields.html][https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-fields.html]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 1]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 2]

# 动态映射 #

> 可以快速使用ES,不需要先创建索引,定义映射.

例如:

PUT data/_doc/1 
    { "count": 2 }

> es将自动为我们创建data索引,映射,类型为long的字段count
> 
>  *  索引文档时,当有新字段,ES将根据我们字段的json的数据类型为我们自动加入字段定义到mapping中

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 3]

[https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-types.html]: https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-types.html
[https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-params.html]: https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-params.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center]: /images/20221123/b1b233bc8a1840a59e1e9c484f871b04.png
[https_www.elastic.co_guide_en_elasticsearch_reference_current_mapping-fields.html]: https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-fields.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 1]: /images/20221123/d6fec201da5846dbb9b35e0968506b7c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 2]: /images/20221123/6e266fe3f2304494a85d22dcd6dcf325.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQyODE1MTIy_size_16_color_FFFFFF_t_70_pic_center 3]: /images/20221123/9186880ff6c34de187fb6724e0e84fe7.png