大数据-173 Elasticsearch 索引操作 增删改查 详细 JSON 操作

news2024/11/28 19:02:40

点一下关注吧！！！非常感谢！！持续更新！！！

目前已经更新到了：

  • Hadoop（已更完）
  • HDFS（已更完）
  • MapReduce（已更完）
  • Hive（已更完）
  • Flume（已更完）
  • Sqoop（已更完）
  • Zookeeper（已更完）
  • HBase（已更完）
  • Redis （已更完）
  • Kafka（已更完）
  • Spark（已更完）
  • Flink（已更完）
  • ClickHouse（已更完）
  • Kudu（已更完）
  • Druid（已更完）
  • Kylin（已更完）
  • Elasticsearch（正在更新…）

章节内容

上节我们完成了如下的内容：

  • Elasticsearch 索引操作
  • IK 分词器安装上使用
  • 自定义分词

在这里插入图片描述

映射操作

索引创建之后，等于有了关系型数据库中的Database，Elasticsearch7.x取消了索引type类型的设置，不允许指定类型，默认为_doc，但字段仍然是有的，我们需要设置字段的约束信息，叫做字段映射（mapping）
字段的约束包括但不限于：

  • 字段的数据类型
  • 是否要存储
  • 是否要索引
  • 分词器

创建映射字段

语法：

PUT /索引名/_mapping
{
  "properties": {
    "字段名": {
      "type": "数据类型",
      "index": true,
      "store": false,
      "analyzer": "分词器"
    }
  }
}

上述内容解释如下：

  • type 类型，可以是 text、long、short、date等等
  • index 是否为索引 默认为true
  • store 是否存储 默认为false
  • analyzer 分词器

示例：

# 新建索引
PUT /wzkicu-index
# 映射关系
PUT /wzkicu-index/_mapping/
{
  "properties": {
    "name": {
      "type": "text",
      "analyzer": "ik_max_word"
    },
    "job": {
      "type": "text",
      "analyzer": "ik_max_word"
    },
    "logo": {
      "type": "keyword",
      "index": "false"
    },
    "payment": {
      "type": "float"
    }
  }
}

运行结果如下图所示：
在这里插入图片描述
上图中，包含的字段如下所示，并且加了一些属性：

  • name 企业名称
  • job 需求岗位
  • logo logo图片地址
  • payment 薪资

映射属性详解

支持的类型非常的多，可以访问对应的文档进行查看：

https://www.elastic.co/guide/en/elasticsearch/reference/8.15/mapping-types.html

对应的页面如下图所示：
在这里插入图片描述
这里有几种：

  • String类型：text可分词，不可参与聚合。keyword不可分词，作为完整字段进行分配，可以参与聚合。
  • Numerical类型：数值类型、分两类，基本数据类型、浮点数的高精度类型
  • Date：日期类型，ES可以对日期格式化字符串存储，但是建议我们存储为毫秒值、存储为long、节省空间。
  • Array 数组类型，进行匹配时，任意一个元素满足，都认为满足。排序时，如果升序则用数组中最小值来排序，如果降序则用数组中的最大值来排序
  • Object对象，{ name: “jack”, age: 21, girl: {name: “Rose”, age: 21}}，如果存储到索引库是对象类型，例如上面的girl，会把girl变成girl.name和girl.age
  • index，true字段会被索引，则可以用来进行搜索，默认值就是true。false字段不会被索引，不能用来搜索。比如LOGO的图片地址，这种不需要索引，就可以设置为False。
  • store，是否将数据进行独立存储，原始的文本存储在 _source里面，默认情况下其他提取出来的字段都不是独立存储的，是从_source里面提取出来的。当然你也可以独立的存储某个字段，只要设置store:true即可，获取独立存储的字段要比_source中解析快得多，但是也会占用更多的空间，所以要根据实际业务需要来设置，默认为false
  • analyzer：指定分词器 一般使用IK分词器 ik_max_word ik_smart

查看映射关系

单个映射关系
语法：

GET /索引名称/_mapping

示例：

GET /wzkicu-index/_mapping

执行的结果如下图所示：
在这里插入图片描述

所有映射关系

语法：

GET _mapping
GET _all/_mapping

执行结果如下图所示：
在这里插入图片描述

修改映射关系

PUT /索引库名/_mapping
{
  "properties": {
    "字段名": {
      "type": "类型",
      "index": true,
      "store": true,
      "analyzer": "分词器"
    }
  }
}

主要注意的是：修改映射只能是增加字段的操作，其他的更改只能删除索引重新建立索引来实现。

一次性建立索引与映射

实际上创建索引和映射是可以放到一起来做的， 在创建索引的同时，直接指定映射。

PUT /索引库名称
{
  "settings":{
    "索引库属性名":"索引库属性值"
  },
  "mappings":{
    "properties":{
      "字段名":{
        "映射属性名":"映射属性值"
      }
    }
  }
}

案例：

PUT /wzk-index
{
  "settings": {},
  "mappings": {
    "properties": {
      "name": {
        "type": "text",
        "analyzer": "ik_max_word"
      }
    }
  }
}

执行结果如下图所示：
在这里插入图片描述

文档增删改查与局部更新

文档，即索引库中的数据，会根据规则创建索引，将用来搜索，可以类比做数据库中的一行数据。

新增文档

新增文档时，涉及到的ID的创建方式，手动指定或者自动生成。

手动新增

POST /索引名称/_doc/{id}

示例：

POST /wzkicu-index/_doc/1
{"name" : "百度",
  "job" : "小度用户运营经理",
  "payment" : "30000",
  "logo" : "https://profile-avatar.csdnimg.cn/755ff10be62f4e7081bc36028fa9eafe_w776341482.jpg!1"
}

POST /wzkicu-index/_doc/2
{"name" : "百度",
  "job" : " 百度用户运营经理",
  "payment" : "50000",
  "logo" : "https://profile-avatar.csdnimg.cn/755ff10be62f4e7081bc36028fa9eafe_w776341482.jpg!1"
}

执行的结果如下图所示：
在这里插入图片描述

自动新增

语法：

POST /索引名称/_doc
{
  "field": "value"
}

示例：

POST /wzkicu-index/_doc
{
  "name" : "百度",
  "job" : " 百度测试",
  "payment" : "20000",
  "logo" : "https://profile-avatar.csdnimg.cn/755ff10be62f4e7081bc36028fa9eafe_w776341482.jpg!1"
}

执行结果如下图所示：
在这里插入图片描述

查询文档

单个文档

语法：

GET /索引名称/_doc/{id}

示例：

GET /wzkicu-index/_doc/1

执行结果如下图所示：
在这里插入图片描述
对返回的结果的格式解释如下：
在这里插入图片描述

所有文档

语法：

 POST /索引名称/_search

示例：

POST /wzkicu-index/_search
{
  "query":{
    "match_all": {
    }
  }
}

测试运行的结果如下图所示：
在这里插入图片描述

定制返回字段

很多业务场景下，我们不需要返回这么多字段：
示例：

GET /wzkicu-index/_doc/1?_source=name,job

执行结果如下图所示，可以看到根据需要，只返回了 name 和 job：
在这里插入图片描述

更新文档

全部更新

新增方式相同，只不过新增是POST，而更新是PUT，而且修改必须指定ID才可以。

  • id对应的文档存在，则修改
  • id对应的文档不存在，则新增
PUT /wzkicu-index/_doc/5
{
  "name" : "百度",
  "job" : " 百度测试",
  "payment" : "20000",
  "logo" : "https://profile-avatar.csdnimg.cn/755ff10be62f4e7081bc36028fa9eafe_w776341482.jpg!1"
}

第一次执行，可以看到右侧是：created：
在这里插入图片描述
再执行一次，可以看到右侧是：updated：
在这里插入图片描述

局部更新

ES可以使用PUT或者POST进行更新，如果指定ID存在，则执行更新操作。
注意：

  • ES执行更新操作的时候，ES是先将旧的标记为删除，再添加新的文档。
  • 旧的文档不会立即消失，但是你也无法访问，ES会在添加更多数据的时候，后台清理已经标记为删除的数据。
    全部更新是直接把之前的老数据，标记为删除状态，然后再添加一条更新的数据（PUT或者POST），局部更新，只是修改某个字段（POST）。
POST /索引名/_update/{id}
{
  "doc":{
    "field":"value"
  }
}

示例：

POST /wzkicu-index/_update/2
{
  "doc":{
    "name":"淘宝"
  }
}

执行的结果如下图所示：
在这里插入图片描述

删除文档

ID删除
语法：

DELETE /索引名/_doc/{id}

示例

DELETE /wzkicu-index/_doc/3

执行结果如下图所示：
在这里插入图片描述

条件删除

语法：

POST /索引名/_delete_by_query
{
  "query": {
    "match": {
      "字段名": "搜索关键字"
    }
  }
}

示例：

# 查询一下 包含百度关键字的
POST /wzkicu-index/_search
{
  "query":{
    "match":{
      "name":"百度"
    }
  }
}

# 删除name字段为百度的doc
POST /wzkicu-index/_delete_by_query
{
  "query":{
    "match":{
      "name":"百度"
    }
  }
}

执行结果如下图所示：
在这里插入图片描述

删除所有

POST /索引名/_delete_by_query
{
  "query": {
    "match_all": {}
  }
}

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/2218864.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

面试题：Redis（七）

面试题：Redis（七）

1. 面试题 2. 缓存预热 当Redis暂时没有数据，但MySQL中有数据时，由程序员、中间件、写段程序提前访问该数据，使得数据进行回写进Redis，从而达到缓存预热的效果，这样可以使得一开始访问页面程序的用户也没有卡顿&#x…
阅读更多...
力扣 简单 876.快慢指针

力扣 简单 876.快慢指针

文章目录 题目介绍题解 题目介绍 题解 class Solution {public ListNode middleNode(ListNode head) {ListNode slow head, fast head;while(fast ! null && fast.next ! null){slow slow.next;fast fast.next.next;}return slow;} }
阅读更多...
JCO发表加州大学团队最新医学AI研究，从常规HE染色切片预测同源重组缺陷和铂类药物反应｜顶刊精析·24-10-18

JCO发表加州大学团队最新医学AI研究，从常规HE染色切片预测同源重组缺陷和铂类药物反应｜顶刊精析·24-10-18

小罗碎碎念 这篇文章是关于一项名为DeepHRD的深度学习平台的研究，该平台能够从常规的苏木精-伊红（H&E）染色组织切片中预测同源重组缺陷（HRD）和铂类药物反应。 作者角色姓名单位第一作者Erik N. Bergstrom加州大学圣…
阅读更多...
c4d好用的渲染软件有哪些？c4d各个渲染器的优缺点

c4d好用的渲染软件有哪些？c4d各个渲染器的优缺点

在3D设计和动画制作领域，Cinema 4D（C4D）是一款备受欢迎的软件。它强大的建模、动画和渲染功能，使其成为许多设计师和艺术家的首选工具。然而，C4D的内置渲染器可能无法满足所有项目的需求，因此许多用户会选择…
阅读更多...
31. 问题 - GPIO调试

31. 问题 - GPIO调试

1. 概述 gpio调试过程中，个别gpio出现，波形干扰 2. gpio配置表 GPIO 功能 备注
阅读更多...
AP上线的那些事儿（1）capwap建立过程、设备初始化以及二层上线

AP上线的那些事儿（1）capwap建立过程、设备初始化以及二层上线

1、了解FITAP与AC的建立过程 之前我们已经知道了FATAP与FIT是一对双胞胎一样的兄弟，FAT哥哥能够直接独立使用当AP桥接、路由器等，而弟弟FIT则比较薄弱，独自发挥不出功效，需要一位师傅（AC）来带领&#xff0c…
阅读更多...
Java21虚拟线程：我的锁去哪儿了？

Java21虚拟线程：我的锁去哪儿了？

0 前言 最近的文章中，我们详细介绍了当我们迁移到 Java 21 并将代际 ZGC 作为默认垃圾收集器时，我们的工作负载是如何受益的。虚拟线程是我们在这次迁移中兴奋采用的另一个特性。 对虚拟线程新手，它们被描述为“轻量级线程，大大…
阅读更多...
word建立目录以及修改页码

word建立目录以及修改页码

1、为word建立新的目录 （1）选中word中的标题设置为第几级标题，将所有的标题均设置完成。最后可以鼠标右击标题，对不同的标题字体大小等进行设置。右击-->修改-->格式-->段落 （2）在word中插入新的…
阅读更多...
springboot039基于Web足球青训俱乐部管理后台系统开发(论文+源码)_kaic

springboot039基于Web足球青训俱乐部管理后台系统开发(论文+源码)_kaic

毕业设计(论文) 基于Web的足球青训俱乐部管理后台系统的设计与开发 学生姓名 XXX 学 号 XXXXXXXX 分院名称 XXXXXXXX 专业班级 XXXXX 指导教师 XXXX …
阅读更多...
12.个人博客系统（Java项目基于spring和vue）

12.个人博客系统（Java项目基于spring和vue）

目录 1.系统的受众说明 2.相关技术介绍 2.1 B/S 简介 2.2 JAVA 简介 2.3 vue简介 2.4 SSM和Springboot简介 3.可行性分析 3.1 技术可行性分析 3.2 经济可行性分析 3.3 操作可行性 4.系统设计 4.1 系统总流程 4.2 博主用例 4.3 游客用例 4.4 系统类 4.…
阅读更多...
llm 论文淘金，大模型精选论文解读，让你从大模型零基础到进阶

llm 论文淘金，大模型精选论文解读，让你从大模型零基础到进阶

技术报告 没啥说的，当下最最最有含金量的论文，值得反复阅读。重点留意：数据清洗方法、pretrain 数据配比、pretrain 超参数、退火阶段、sft 的 task 种类、sft 的数据量级、dpo / ppo 训练技巧，合成数据方法等。 我个人觉着&…
阅读更多...
Java项目实战II基于Spring Boot的毕业就业信息管理系统设计与实现(源码+数据库+文档)

Java项目实战II基于Spring Boot的毕业就业信息管理系统设计与实现(源码+数据库+文档)

目录 一、前言 二、技术介绍 三、系统实现 四、文档参考 五、核心代码 六、源码获取 全栈码农以及毕业设计实战开发，CSDN平台Java领域新星创作者，专注于大学生项目实战开发、讲解和毕业答疑辅导。获取源码联系方式请查看文末 一、前言 随着高校扩…
阅读更多...
014_django基于大数据运城市二手房价数据可视化系统的设计与实现2024_3ahrxq75

014_django基于大数据运城市二手房价数据可视化系统的设计与实现2024_3ahrxq75

目录 系统展示 开发背景 代码实现 项目案例 获取源码 博主介绍：CodeMentor毕业设计领航者、全网关注者30W群落，InfoQ特邀专栏作家、技术博客领航者、InfoQ新星培育计划导师、Web开发领域杰出贡献者，博客领航之星、开发者头条/腾讯云/AW…
阅读更多...
【C++】编码最全详解

【C++】编码最全详解

✨ Blog’s 主页: 白乐天_ξ( ✿＞◡❛) 🌈 个人Motto：他强任他强，清风拂山冈！ 🔥 所属专栏：C深入学习笔记 💫 欢迎来到我的学习笔记！ 一、什么编码？ 编码&am…
阅读更多...
DDR Study - LPDDR Initial

DDR Study - LPDDR Initial

参考来源：JESD209-4B 在之前的DDR Study - Basic Understanding中介绍了DDR的基础概念，从这篇文章开始，会基于LPDDR4依次按照如下顺序对LPDDR内容进行简单分析： LPDDR Initial → LPDDR Write Leveling and DQ Training → LPDDR …
阅读更多...
【Jenkins】windows安装步骤

【Jenkins】windows安装步骤

【Jenkins】windows安装步骤 官网使用WAR包方式运行浏览器访问Jenkinswindows-installer安装安装过程问题解决This account either does not hava the privilege to logon as a service or the account was unable to be verified 安装成功修改jenkins.xml启动jenkins访问jenki…
阅读更多...
如何测试IP速度？

如何测试IP速度？

了解代理的连接速度是否快速是确保网络使用效率和体验的关键因素之一。本文来为大家如何有效地评估和测试代理IP的连接速度，以及一些实用的方法和工具，帮助用户做出明智的选择和决策。 一、如何评估代理IP的连接速度 1. 使用在线速度测试工具 为了快速…
阅读更多...
阿里云云盘在卸载时关联到PHP进程，如何在不影响PHP进程情况下卸载磁盘

阿里云云盘在卸载时关联到PHP进程，如何在不影响PHP进程情况下卸载磁盘

1.问题： 在使用umount /dev/vdc1 卸载磁盘时，提示如下，导致无法在Linux系统下卸载磁盘 umount /dev/vdc1 umount: /var/www/html/*/eshop/IFile3: target is busy.(In some cases useful info about processes that usethe device is found…
阅读更多...
鸿蒙Next设备上的ProxyMan、Charles网络抓包配置教程

鸿蒙Next设备上的ProxyMan、Charles网络抓包配置教程

一、Proxyman配置 1. 导出证书 ProxyMan菜单栏依次点击 证书—>导出—>根证书为PEM 然后保存.pem文件传送(如hdc命令<下文会有介绍>)至鸿蒙Next设备存储任意位置 2. 安装证书 系统设置搜索“证书”&#xff0c;结果列表中点击“证书与凭据” 点击“从存储设备…
阅读更多...
AI周报（10.13-10.19）

AI周报（10.13-10.19）

AI应用-清华校友用AI破解162个高数定理 加州理工、斯坦福和威大的研究人员提出了LeanAgent——一个终身学习&#xff0c;并能证明定理的AI智能体。LeanAgent会根据数学难度优化的学习轨迹课程&#xff0c;来提高学习策略。并且&#xff0c;它还有一个动态数据库&#xff0c;有效…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023