第十一章 分布式搜索引擎 elasticsearch
二、索引库操作
-
索引库就类似数据库表,mapping 映射就类似表的结构。
-
我们要向 es 中存储数据,必须先创建“库”和“表”。
1. mapping 映射属性
-
mapping 是对索引库中文档的约束,常见的 mapping 属性包括:
- type:字段数据类型,常见的简单类型有:
- 字符串:text(可分词的文本)、keyword(精确值,例如:品牌、国家、ip 地址)
- 数值:long、integer、short、byte、double、float
- 布尔:boolean
- 日期:date
- 对象:object
- index:是否创建索引,默认为 true
- analyzer:使用哪种分词器
- properties:该字段的子字段
- type:字段数据类型,常见的简单类型有:
-
例如下面的 json 文档:
{
"age": 21,
"weight": 52.1,
"isMarried": false,
"info": "小帽课堂学习Java",
"email": "alex@gmail.com",
"score": [99.1, 99.5, 98.9],
"name": {
"firstName": "云",
"lastName": "赵"
}
}
-
对应的每个字段映射(mapping):
- age:类型为 integer;参与搜索,因此需要 index 为 true;无需分词器
- weight:类型为 float;参与搜索,因此需要 index 为 true;无需分词器
- isMarried:类型为 boolean;参与搜索,因此需要 index 为 true;无需分词器
- info:类型为字符串,需要分词,因此是 text;参与搜索,因此需要 index 为 true;分词器可以用 ik_smart
- email:类型为字符串,但是不需要分词,因此是 keyword;不参与搜索,因此需要 index 为 false;无需分词器
- score:虽然是数组,但是我们只看元素的类型,类型为 float;参与搜索,因此需要 index 为 true;无需分词器
- name:类型为 object,需要定义多个子属性
- name.firstName;类型为字符串,但是不需要分词,因此是 keyword;参与搜索,因此需要 index 为 true;无需分词器
- name.lastName;类型为字符串,但是不需要分词,因此是 keyword;参与搜索,因此需要 index 为 true;无需分词器
2. 索引库的 CRUD
- 这里统一使用 Kibana 编写 DSL 的方式来演示。
2.1 创建索引库和映射
2.1.1 基本语法
- 请求方式:PUT
- 请求路径:/索引库名,可以自定义
- 请求参数:mapping 映射
2.1.2 格式
PUT /索引库名称
{
"mappings": {
"properties": {
"字段名":{
"type": "text",
"analyzer": "ik_smart"
},
"字段名2":{
"type": "keyword",
"index": "false"
},
"字段名3":{
"properties": {
"子字段": {
"type": "keyword"
}
}
},
// ...略
}
}
}
2.1.3 示例
PUT /alex
{
"mappings": {
"properties": {
"info":{
"type": "text",
"analyzer": "ik_smart"
},
"email":{
"type": "keyword",
"index": "false"
},
"name":{
"properties": {
"firstName": {
"type": "keyword"
}
}
},
// ... 略
}
}
}
2.2 查询索引库
2.2.1 基本语法
-
请求方式:GET
-
请求路径:/索引库名
-
请求参数:无
2.2.2 格式
GET /索引库名
2.2.3 示例
2.3 修改索引库
-
倒排索引结构虽然不复杂,但是一旦数据结构改变(比如改变了分词器),就需要重新创建倒排索引,这简直是灾难。因此索引库一旦创建,无法修改 mapping。
-
虽然无法修改 mapping 中已有的字段,但是却允许添加新的字段到 mapping 中,因为不会对倒排索引产生影响。
2.3.1 语法说明
PUT /索引库名/_mapping
{
"properties": {
"新字段名":{
"type": "integer"
}
}
}
2.3.2 示例
2.4 删除索引库
2.4.1 语法
-
请求方式:DELETE
-
请求路径:/索引库名
-
请求参数:无
2.4.2 格式
DELETE /索引库名
- 在 kibana 中测试:
2.5 总结
-
索引库操作有哪些?
- 创建索引库:PUT /索引库名
- 查询索引库:GET /索引库名
- 删除索引库:DELETE /索引库名
- 添加字段:PUT /索引库名/_mapping
三、文档操作
1. 新增文档
1.1 语法
POST /索引库名/_doc/文档id
{
"字段1": "值1",
"字段2": "值2",
"字段3": {
"子属性1": "值3",
"子属性2": "值4"
},
// ...
}
1.2 示例
POST /alex/_doc/1
{
"info": "小帽课堂学习Java",
"email": "alex@gmail.com",
"name": {
"firstName": "云",
"lastName": "赵"
}
}
1.3 响应
2. 查询文档
- 根据 rest 风格,新增是 post,查询应该是 get,不过查询一般都需要条件,这里我们把文档 id 带上。
2.1 语法
GET /{索引库名称}/_doc/{id}
2.2 通过 kibana 查看数据
GET /alex/_doc/1
2.3 查看结果
3. 删除文档
- 删除使用 DELETE 请求,同样,需要根据 id 进行删除:
3.1 语法
DELETE /{索引库名}/_doc/id值
3.2 示例
# 根据id删除数据
DELETE /alex/_doc/1
4. 修改文档
-
修改有两种方式:
- 全量修改:直接覆盖原来的文档
- 增量修改:修改文档中的部分字段
4.1 全量修改
-
全量修改是覆盖原来的文档,其本质是:
- 根据指定的 id 删除文档
- 新增一个相同 id 的文档
-
注意:如果根据 id 删除时,id 不存在,第二步的新增也会执行,也就从修改变成了新增操作了。
4.1.1 语法
PUT /{索引库名}/_doc/文档id
{
"字段1": "值1",
"字段2": "值2",
// ... 略
}
4.1.2 示例
PUT /alex/_doc/1
{
"info": "小帽课堂学习高级Java",
"email": "alex@gmail.com",
"name": {
"firstName": "云",
"lastName": "赵"
}
}
4.2 增量修改
- 增量修改是只修改指定 id 匹配的文档中的部分字段。
4.2.1 语法
POST /{索引库名}/_update/文档id
{
"doc": {
"字段名": "新的值",
}
}
4.2.2 示例
POST /alex/_update/1
{
"doc": {
"email": "ZhaoYun@gmail.com"
}
}
5. 总结
-
文档操作有哪些?
- 创建文档:POST /{索引库名}/_doc/文档 id { json 文档 }
- 查询文档:GET /{索引库名}/_doc/文档 id
- 删除文档:DELETE /{索引库名}/_doc/文档 id
- 修改文档:
- 全量修改:PUT /{索引库名}/_doc/文档 id { json 文档 }
- 增量修改:POST /{索引库名}/_update/文档 id { “doc”: {字段}}