第十一章 分布式搜索引擎 elasticsearch
二、索引库操作
-
索引库就类似数据库表，mapping 映射就类似表的结构。
-
我们要向 es 中存储数据，必须先创建“库”和“表”。
1. mapping 映射属性
-
mapping 是对索引库中文档的约束，常见的 mapping 属性包括：
- type：字段数据类型，常见的简单类型有：
- 字符串：text（可分词的文本）、keyword（精确值，例如：品牌、国家、ip 地址）
- 数值：long、integer、short、byte、double、float
- 布尔：boolean
- 日期：date
- 对象：object
- index：是否创建索引，默认为 true
- analyzer：使用哪种分词器
- properties：该字段的子字段
- type：字段数据类型，常见的简单类型有：
-
例如下面的 json 文档：
{
"age": 21,
"weight": 52.1,
"isMarried": false,
"info": "小帽课堂学习Java",
"email": "alex@gmail.com",
"score": [99.1, 99.5, 98.9],
"name": {
"firstName": "云",
"lastName": "赵"
}
}
-
对应的每个字段映射（mapping）：
- age：类型为 integer；参与搜索，因此需要 index 为 true；无需分词器
- weight：类型为 float；参与搜索，因此需要 index 为 true；无需分词器
- isMarried：类型为 boolean；参与搜索，因此需要 index 为 true；无需分词器
- info：类型为字符串，需要分词，因此是 text；参与搜索，因此需要 index 为 true；分词器可以用 ik_smart
- email：类型为字符串，但是不需要分词，因此是 keyword；不参与搜索，因此需要 index 为 false；无需分词器
- score：虽然是数组，但是我们只看元素的类型，类型为 float；参与搜索，因此需要 index 为 true；无需分词器
- name：类型为 object，需要定义多个子属性
- name.firstName；类型为字符串，但是不需要分词，因此是 keyword；参与搜索，因此需要 index 为 true；无需分词器
- name.lastName；类型为字符串，但是不需要分词，因此是 keyword；参与搜索，因此需要 index 为 true；无需分词器
2. 索引库的 CRUD
- 这里统一使用 Kibana 编写 DSL 的方式来演示。
2.1 创建索引库和映射
2.1.1 基本语法
- 请求方式：PUT
- 请求路径：/索引库名，可以自定义
- 请求参数：mapping 映射
2.1.2 格式
PUT /索引库名称
{
"mappings": {
"properties": {
"字段名":{
"type": "text",
"analyzer": "ik_smart"
},
"字段名2":{
"type": "keyword",
"index": "false"
},
"字段名3":{
"properties": {
"子字段": {
"type": "keyword"
}
}
},
// ...略
}
}
}
2.1.3 示例
PUT /alex
{
"mappings": {
"properties": {
"info":{
"type": "text",
"analyzer": "ik_smart"
},
"email":{
"type": "keyword",
"index": "false"
},
"name":{
"properties": {
"firstName": {
"type": "keyword"
}
}
},
// ... 略
}
}
}
2.2 查询索引库
2.2.1 基本语法
-
请求方式：GET
-
请求路径：/索引库名
-
请求参数：无
2.2.2 格式
GET /索引库名
2.2.3 示例
2.3 修改索引库
-
倒排索引结构虽然不复杂，但是一旦数据结构改变（比如改变了分词器），就需要重新创建倒排索引，这简直是灾难。因此索引库一旦创建，无法修改 mapping。
-
虽然无法修改 mapping 中已有的字段，但是却允许添加新的字段到 mapping 中，因为不会对倒排索引产生影响。
2.3.1 语法说明
PUT /索引库名/_mapping
{
"properties": {
"新字段名":{
"type": "integer"
}
}
}
2.3.2 示例
2.4 删除索引库
2.4.1 语法
-
请求方式：DELETE
-
请求路径：/索引库名
-
请求参数：无
2.4.2 格式
DELETE /索引库名
- 在 kibana 中测试：
2.5 总结
-
索引库操作有哪些？
- 创建索引库：PUT /索引库名
- 查询索引库：GET /索引库名
- 删除索引库：DELETE /索引库名
- 添加字段：PUT /索引库名/_mapping
三、文档操作
1. 新增文档
1.1 语法
POST /索引库名/_doc/文档id
{
"字段1": "值1",
"字段2": "值2",
"字段3": {
"子属性1": "值3",
"子属性2": "值4"
},
// ...
}
1.2 示例
POST /alex/_doc/1
{
"info": "小帽课堂学习Java",
"email": "alex@gmail.com",
"name": {
"firstName": "云",
"lastName": "赵"
}
}
1.3 响应
2. 查询文档
- 根据 rest 风格，新增是 post，查询应该是 get，不过查询一般都需要条件，这里我们把文档 id 带上。
2.1 语法
GET /{索引库名称}/_doc/{id}
2.2 通过 kibana 查看数据
GET /alex/_doc/1
2.3 查看结果
3. 删除文档
- 删除使用 DELETE 请求，同样，需要根据 id 进行删除：
3.1 语法
DELETE /{索引库名}/_doc/id值
3.2 示例
# 根据id删除数据
DELETE /alex/_doc/1
4. 修改文档
-
修改有两种方式：
- 全量修改：直接覆盖原来的文档
- 增量修改：修改文档中的部分字段
4.1 全量修改
-
全量修改是覆盖原来的文档，其本质是：
- 根据指定的 id 删除文档
- 新增一个相同 id 的文档
-
注意：如果根据 id 删除时，id 不存在，第二步的新增也会执行，也就从修改变成了新增操作了。
4.1.1 语法
PUT /{索引库名}/_doc/文档id
{
"字段1": "值1",
"字段2": "值2",
// ... 略
}
4.1.2 示例
PUT /alex/_doc/1
{
"info": "小帽课堂学习高级Java",
"email": "alex@gmail.com",
"name": {
"firstName": "云",
"lastName": "赵"
}
}
4.2 增量修改
- 增量修改是只修改指定 id 匹配的文档中的部分字段。
4.2.1 语法
POST /{索引库名}/_update/文档id
{
"doc": {
"字段名": "新的值",
}
}
4.2.2 示例
POST /alex/_update/1
{
"doc": {
"email": "ZhaoYun@gmail.com"
}
}
5. 总结
-
文档操作有哪些？
- 创建文档：POST /{索引库名}/_doc/文档 id { json 文档 }
- 查询文档：GET /{索引库名}/_doc/文档 id
- 删除文档：DELETE /{索引库名}/_doc/文档 id
- 修改文档：
- 全量修改：PUT /{索引库名}/_doc/文档 id { json 文档 }
- 增量修改：POST /{索引库名}/_update/文档 id { “doc”: {字段}}
