1. 逻辑架构（面向用户的数据视图）
这是用户在使用和操作 Elasticsearch 时最常接触到的概念层次，类似于传统数据库中的数据库、表、行。
-
文档
-
是什么： 最基本的数据单元，是一个可被索引的信息单元。
-
格式： 采用 JSON 格式表示。例如，一条用户信息、一篇商品描述、一条日志记录都可以是一个文档。
-
类比： 关系型数据库中的 一行记录。
-
示例：
{"name": "张三","age": 30,"hobbies": ["阅读", "游泳"],"address": {"city": "北京","street": "海淀区"} }
-
-
索引
-
是什么： 具有相似特征的文档的集合。它是进行数据存储、查询、更新等操作的主要载体。
-
类比： 关系型数据库中的 一张表。
-
特点： 每个索引必须有一个唯一的名称，所有操作都是通过索引名来进行的。
-
-
类型
-
历史： 在 7.x 版本之前，一个索引中可以定义多种类型，类似于表中的不同结构。例如，一个
blog索引下可以有user类型和article类型。 -
现状： 在 Elasticsearch 7.x 及之后版本中，一个索引只能包含一个类型，且默认名为
_doc。这个概念正在被逐渐废弃。所以，现在最佳实践是：一个索引只存储一种类型的文档。
-
-
映射
-
是什么： 定义了索引中的文档包含哪些字段，以及每个字段的数据类型和属性。它相当于表的模式。
-
作用： 告诉 Elasticsearch 如何解释和处理文档中的各个字段。例如，某个字段是
text类型（需要分词，用于全文搜索），还是keyword类型（不分词，用于精确匹配和聚合）。 -
示例： 为
user索引定义的映射可能规定name是text类型，age是integer类型。
-
逻辑结构总结：索引 (Index) > 类型 (Type，现已基本弃用) > 文档 (Document) > 字段 (Field)，而 映射 (Mapping) 是定义这些字段规则的蓝图。
2. 物理架构（分布式系统的底层实现）
这是 Elasticsearch 作为分布式搜索引擎的核心，描述了数据在集群中是如何实际存储和管理的。
-
节点
-
是什么： 一个运行中的 Elasticsearch 实例。一台服务器上可以运行一个或多个节点。
-
类型：
-
主节点： 负责集群范围内的轻量级管理操作，如创建或删除索引、跟踪哪些节点是集群的一部分、决定分片分配到哪个节点。生产环境通常需要多个合格的主节点候选节点以确保高可用。
-
数据节点： 存储数据，执行与数据相关的操作，如 CRUD、搜索和聚合。这是存储和计算的主力，需要大量的 CPU、内存和磁盘 I/O。
-
协调节点： 处理所有客户端请求，将请求路由到正确的数据节点，并收集结果进行汇总。如果未指定节点角色，所有节点默认都是协调节点。在大集群中，可以设置专用的协调节点来分担负载。
-
摄取节点： 专门用于执行预处理管道，在索引文档之前对数据进行转换和丰富。
-
-
-
集群
-
是什么： 由一个或多个节点组成的集合。它们共同持有你的全部数据，并提供跨所有节点的联合索引和搜索能力。
-
特点： 每个集群有一个唯一的名称（默认是
elasticsearch），节点通过集群名来加入。
-
-
分片
-
是什么： Elasticsearch 将索引切分成多个部分，每个部分称为一个分片。这是 Elasticsearch 实现水平扩展和分布式处理的基石。
-
主分片：
-
每个文档都存储在一个主分片上。
-
索引创建时，其主分片数量就固定了，后续无法修改（除非重建索引）。
-
数据被均匀分布到所有主分片上。
-
-
副本分片：
-
每个主分片可以有零个或多个副本。
-
它们是主分片的完整拷贝，提供：
-
高可用性：如果主分片所在节点宕机，其副本可以被提升为新的主分片。
-
提高吞吐量：搜索请求可以并行地在所有副本分片上执行，从而大幅提升搜索性能。
-
-
-
物理架构总结：集群 (Cluster) > 节点 (Node) > 索引 (Index) > 分片 (Shard，包括主分片和副本分片)。一个索引的分片会分布在集群的多个数据节点上。
3. 数据架构（数据如何被存储和索引）
这是 Elasticsearch 实现快速搜索的底层核心技术，主要由 Apache Lucene 提供。
-
Lucene 索引
-
关系： 一个 Elasticsearch 分片 就是一个完整的 Lucene 索引。
-
组成： Lucene 索引由一系列不可变的 段 组成。
-
-
段
-
是什么： Lucene 索引的核心组成部分，是倒排索引的最小单元。
-
特点：
-
不可变： 一旦创建，就无法修改。这带来了缓存友好、锁开销低等优点。
-
后台合并： 当段数量过多时，Lucene 会在后台将它们合并成更大的段，并清理已删除的文档。这个过程称为段合并。
-
-
-
倒排索引
-
是什么： Elasticsearch 能够实现毫秒级全文搜索的核心数据结构。
-
原理： 它通过“词项”来反向关联到包含它的文档。
-
传统正排索引：
文档ID -> 文档内容(通过ID找内容) -
倒排索引：
词项 -> [文档ID1, 文档ID2, ...](通过内容找ID)
-
-
示例：
-
文档1: "I love Elasticsearch"
-
文档2: "I love coding"
-
倒排索引列表：
-
i: [1, 2] -
love: [1, 2] -
elasticsearch: [1] -
coding: [2]
-
-
-
当搜索 "love coding" 时，系统会分别找到
love和coding对应的文档ID列表，然后进行交集运算，最终返回文档2。
-
4.安装elasticsearch
- 首先需要下载Elasticsearch 8.11.1的安装包
- sudo tar -xzf elasticsearch-8.11.1-linux-x86_64.tar.gz -C /usr/local/elasticsearch/
- 下载成功，现在解压安装包。
- sudo tar -xzf elasticsearch-8.11.1-linux-x86_64.tar.gz -C /usr/local/elasticsearch/
- Elasticsearch已成功解压。接下来需要创建一个专用用户来运行Elasticsearch，因为不建议使用root用户直接运行。
- sudo adduser --system --no-create-home --disabled-login --group elasticsearch
- elasticsearch系统用户已创建成功。现在需要设置Elasticsearch安装目录的所有权，将其更改为elasticsearch用户和组。
- sudo chown -R elasticsearch:elasticsearch /usr/local/elasticsearch/elasticsearch-8.11.1
- 权限设置成功，现在创建systemd服务文件，需要使用sudo权限创建systemd服务文件。
-
sudo bash -c 'cat > /etc/systemd/system/elasticsearch.service << EOF[Unit]Description=ElasticsearchDocumentation=https://www.elastic.coWants=network-online.targetAfter=network-online.target[Service]Type=notifyUser=elasticsearchGroup=elasticsearchEnvironment=ES_HOME=/usr/local/elasticsearch/elasticsearch-8.11.1Environment=ES_PATH_CONF=/usr/local/elasticsearch/elasticsearch-8.11.1/configEnvironment=PID_DIR=/var/run/elasticsearchEnvironment=ES_SD_NOTIFY=trueEnvironment=JAVA_HOME=/usr/local/elasticsearch/elasticsearch-8.11.1/jdkWorkingDirectory=/usr/local/elasticsearch/elasticsearch-8.11.1ExecStart=/usr/local/elasticsearch/elasticsearch-8.11.1/bin/elasticsearchRestart=alwaysRestartSec=10LimitNOFILE=65535LimitNPROC=4096LimitAS=infinityLimitFSIZE=infinity[Install]WantedBy=multi-user.targetEOF'
- 服务文件创建成功，由于无法使用systemctl命令，我将直接以elasticsearch用户启动Elasticsearch。
-
sudo mkdir -p /var/run/elasticsearch && sudo chown elasticsearch:elasticsearch /var/run/elasticsearch && sudo -u elasticsearch /usr/local/elasticsearch/elasticsearch-8.11.1/bin/elasticsearch -d
- Elasticsearch已成功启动，现在检查进程状态并获取初始密码信息。
-
ps aux | grep elasticsearch && echo "===初始密码信息===" && sudo -u elasticsearch grep -A 5 'password' /usr/local/elasticsearch/elasticsearch-8.11.1/config/elasticsearch.yml || echo "初始密码可能已输出到控制台日志中"
-
Elasticsearch 8.11.1已成功安装并启动完成。
已执行的操作：
下载了Elasticsearch 8.11.1的安装包
将安装包解压到/usr/local/elasticsearch目录
设置了elasticsearch用户对安装目录的权限
创建了systemd服务文件用于管理服务
成功以elasticsearch用户启动了服务
5.安装kibana
如果说 Elasticsearch 是一个强大的分布式搜索引擎和数据库，存储着海量的原始数据，那么 Kibana 就是专门为这个数据库量身打造的“可视化窗口”和“智能控制面板”。
您无法直接与 Elasticsearch 这个“数据库引擎”进行轻松的对话，但通过 Kibana 这个友好的图形化界面，您可以轻松地查询、探索、分析和展示存储在 Elasticsearch 中的数据。
sudo wget https://artifacts.elastic.co/downloads/kibana/kibana-8.11.1-linux-x86_64.tar.gz -O /usr/local/kibana/kibana-8.11.1-linux-x86_64.tar.gz
解压安装包
sudo tar -xzf kibana-8.11.1-linux-x86_64.tar.gz -C /usr/local/kibana/
创建kibana用户进行配置
cd /usr/local/elasticsearch/elasticsearch-8.11.1/bin
sudo ./elasticsearch-users useradd kibana_system -p kibana_system -r kibana_system
现在修改Kibana配置文件，设置连接到Elasticsearch的信息,并启动程序
sudo bash -c "cat > /usr/local/kibana/kibana-8.11.1/config/kibana.yml << 'EOF' server.port: 5601 server.host: '0.0.0.0' elasticsearch.hosts: ['https://localhost:9200'] elasticsearch.username: 'kibana_system' elasticsearch.password: 'kibana_system' elasticsearch.ssl.verificationMode: 'none' server.name: 'kibana' EOF" && echo "配置已更新" && sudo pkill -f kibana && echo "已停止旧进程" && sudo /usr/local/kibana/kibana-8.11.1/bin/kibana --allow-root > /usr/local/kibana/kibana-8.11.1/logs/kibana.log 2>&1 &
- 日志显示"Kibana is now available"，表示服务已正常运行
- 可以通过 http://ip:5601 访问Kibana界面
文件/usr/local/kibana/kibana-8.11.1/config/kibana.yml中添加配置
server.port: 5601 server.host: '0.0.0.0' elasticsearch.hosts: ['https://localhost:9200'] elasticsearch.username: 'kibana_system' elasticsearch.password: 'kibana_system' elasticsearch.ssl.verificationMode: 'none' server.name: 'kibana' i18n.locale: zh-CN
![[note] slope trick](http://pic.xiahunao.cn/[note] slope trick)
