Elasticsearch数据搜索与分析实战电子书

内 容 提 要

前 言

原理篇

第1章 快速入门

1.1 Elasticsearch简介

1.2 Elasticsearch的典型接入方式

1.2.1 将Elasticsearch作为数据源

1.2.2 给已有系统添加Elasticsearch

1.2.3 使用Elastic Stack

1.3 专有名词解释

1.4 安装Elasticsearch 7.9.1

1.5 安装Kibana调试Elasticsearch

1.6 Elasticsearch节点的重要配置

1.6.1 集群节点的配置方法和优先级

1.6.2 elasticsearch.yml的重要配置

1.6.3 配置JVM的堆内存大小

1.7 本章小结

第2章 深入原理

2.1 搜索引擎的基本原理

2.2 Elasticsearch集群的形成机制

2.2.1 集群节点的发现、选举和引导过程

2.2.2 集群状态的发布过程

2.3 索引分片的分配机制

2.3.1 分片的分配

2.3.2 分片分配的过程

2.3.3 分片分配的感知

2.3.4 分片分配的过滤

2.4 索引分片的恢复机制

2.4.1 分片的恢复

2.4.2 分片恢复的过程

2.4.3 减少不必要的分片恢复

2.5 索引数据的写入过程

2.6 索引数据的搜索过程

2.7 本章小结

应用篇

第3章 索引数据

3.1 使用映射定义索引结构

3.1.1 映射的概念和使用

3.1.2 映射支持的常规字段类型

3.1.3 忽略映射中不合法的数据

3.1.4 字段复制和字段存储

3.1.5 动态映射

3.2 索引中数据的增删改查

3.2.1 使用REST端点对索引映射中的数据进行增删改查

3.2.2 使用乐观锁进行并发控制

3.2.3 索引数据的批量写入

3.3 索引数据的路由规则

3.3.1 索引数据路由的原理

3.3.2 使用自定义路由分发数据

3.4 索引的别名

3.4.1 别名的创建和删除

3.4.2 别名配合数据过滤

3.4.3 别名配合数据路由

3.5 滚动索引

3.6 索引的状态管理

3.6.1 清空缓存

3.6.2 刷新索引

3.6.3 冲洗索引

3.6.4 强制合并

3.6.5 关闭索引

3.6.6 冻结索引

3.7 索引的块

3.8 索引模板

3.8.1 使用索引模板定制索引结构

3.8.2 使用模板组件简化模板配置

3.9 索引的监控

3.9.1 监控索引的健康状态

3.9.2 监控索引分片的段数据

3.9.3 监控索引分片的分配

3.9.4 监控索引分片的恢复

3.9.5 监控索引的统计指标

3.10 控制索引分片的分配

3.11 本章小结

第4章 文本分析

4.1 文本分析的原理

4.2 使用内置的分析器分析文本

4.2.1 标准分析器

4.2.2 简单分析器

4.2.3 空格分析器

4.3 使用IK分词器分析文本

4.3.1 安装IK分词器

4.3.2 在索引中使用IK分词器

4.4 自定义文本分析器分析文本

4.4.1 字符过滤器

4.4.2 分词器

4.4.3 分词过滤器

4.4.4 给索引添加自定义分析器

4.5 查看文档的词条向量

4.6 keyword类型字段的标准化

4.7 本章小结

第5章 搜索数据

5.1 精准级查询

5.1.1 术语查询

5.1.2 多术语查询

5.1.3 主键查询

5.1.4 范围查询

5.1.5 存在查询

5.1.6 前缀查询

5.1.7 正则查询

5.1.8 通配符查询

5.2 全文检索

5.2.1 匹配搜索

5.2.2 布尔前缀匹配搜索

5.2.3 短语搜索

5.2.4 短语前缀匹配搜索

5.2.5 多字段匹配搜索

5.2.6 查询字符串搜索

5.3 经纬度搜索

5.3.1 圆形搜索

5.3.2 矩形搜索

5.3.3 多边形搜索

5.4 复合搜索

5.4.1 布尔查询

5.4.2 常量得分查询

5.4.3 析取最大查询

5.4.4 相关度增强查询

5.5 搜索结果的总数

5.6 搜索结果的分页

5.6.1 普通分页

5.6.2 滚动分页

5.6.3 Search after分页

5.7 搜索结果的排序

5.8 筛选搜索结果返回的字段

5.9 高亮搜索结果中的关键词

5.10 折叠搜索结果

5.11 解释搜索结果

5.12 本章小结

第6章 聚集统计

6.1 度量聚集

6.1.1 平均值聚集

6.1.2 最大值和最小值聚集

6.1.3 求和聚集

6.1.4 统计聚集

6.1.5 基数聚集

6.1.6 百分比聚集

6.1.7 百分比等级聚集

6.1.8 头部命中聚集

6.1.9 矩阵统计聚集

6.2 桶聚集

6.2.1 词条聚集

6.2.2 范围聚集

6.2.3 日期范围聚集

6.2.4 直方图聚集

6.2.5 日期直方图聚集

6.2.6 缺失聚集

6.2.7 过滤器聚集

6.2.8 多过滤器聚集

6.3 管道聚集

6.3.1 平均桶聚集

6.3.2 求和桶聚集

6.3.3 最大桶和最小桶聚集

6.3.4 累计求和桶聚集

6.3.5 差值聚集

6.4 使用fielddata聚集text字段

6.5 使用全局有序编号加快聚集速度

6.6 给聚集请求添加后过滤器

6.7 本章小结

第7章 父子关联

7.1 使用对象数组存在的问题

7.2 嵌套对象

7.2.1 在索引中使用嵌套对象

7.2.2 嵌套对象的搜索

7.2.3 嵌套对象的聚集

7.3 join字段

7.3.1 在索引中使用join字段

7.3.2 join字段的搜索

7.3.3 join字段的聚集

7.4 在应用层关联数据

7.5 本章小结

第8章 Java高级客户端编程

8.1 开发前的准备

8.2 建立索引并写入数据

8.2.1 创建映射

8.2.2 写入、修改、删除数据

8.3 搜索数据

8.4 统计分析

8.5 为索引接入实时数据

8.6 本章小结

第9章 集群扩展和性能优化

9.1 节点的角色类型

9.2 在CentOS 7上搭建Elasticsearch集群

9.2.1 准备工作

9.2.2 安装集群

9.2.3 验证安装

9.3 推荐的集群配置

9.4 监控集群

9.4.1 监控集群的状态信息

9.4.2 监控集群的健康状态

9.4.3 监控集群节点的统计指标

9.4.4 监控节点的热点线程

9.4.5 查看慢搜索日志

9.4.6 查看慢索引日志

9.5 索引分片数的设置与横向扩容

9.6 优化索引的写入速度

9.6.1 避免写入过大的文档

9.6.2 合并写入请求

9.6.3 适当增大写入的线程数和索引缓冲区

9.7 优化搜索的响应速度

9.7.1 避免深度分页

9.7.2 合并搜索请求

9.7.3 使用缓存加快搜索速度

9.7.4 控制搜索请求的路由

9.8 集群的重启

9.8.1 全集群重启

9.8.2 滚动重启

9.9 集群的备份和恢复

9.9.1 搭建共享文件目录

9.9.2 备份集群数据

9.9.3 恢复集群数据

9.9.4 删除备份数据

9.9.5 自动化备份

9.10 远程集群

9.10.1 配置远程集群

9.10.2 搜索远程集群的数据

9.11 本章小结

发散篇

第10章 Logstash：数据的源泉

10.1 Logstash的工作原理

10.2 Logstash的安装和目录结构

10.3 Logstash的重要配置

10.4 Logstash采集脚本的结构

10.5 实战举例的执行

10.5.1 采集Nginx日志数据到索引中

10.5.2 全量抽取表数据到索引中

10.5.3 增量抽取表数据到索引中

10.5.4 如何给敏感配置项加密

10.6 本章小结

第11章 Kibana：数据可视化利器

11.1 在CentOS 7上安装Kibana

11.2 用Kibana可视化管理数据

11.2.1 索引管理

11.2.2 快照备份和恢复管理

11.2.3 远程集群管理

11.3 开发工具

11.3.1 REST端点控制台

11.3.2 搜索调试器

11.3.3 Grok正则模式调试器

11.4 数据可视化分析

11.4.1 Discover发现

11.4.2 Visualize可视化组件

11.4.3 Maps地图

11.4.4 Dashboard大屏仪表盘

11.4.5 Canvas画布

11.4.6 查看样例数据

11.5 本章小结

第12章 Beats家族：精细化数据采集

12.1 Beats家族在Elastic Stack中的职责

12.2 Filebeat的安装和工作原理

12.3 filebeat.yml的重要配置

12.4 Filebeat采集Nginx日志到Elasticsearch中

12.5 Filebeat采集日志到Logstash中

12.6 本章小结