美文网首页
elasticsearch 内部存储执行机制

elasticsearch 内部存储执行机制

作者: 高山之水 | 来源:发表于2018-05-09 16:17 被阅读0次

    新建、索引和删除单个文档

    elas_0402.png

    以下是在主副分片和任何副本分片上面成功新建,索引和删除文档所需要的步骤顺序:

    1. 客户端向 Node 1 发送新建、索引或者删除请求。
    2. 节点使用文档的 _id 确定文档属于分片 0 。请求会被转发到 Node 3,因为分片 0 的主分片目前被分配在 Node 3 上。
    3. Node 3 在主分片上面执行请求。如果成功了,它将请求并行转发到 Node 1Node 2 的副本分片上。一旦所有的副本分片都报告成功, Node 3 将向协调节点报告成功,协调节点向客户端报告成功。

    在客户端收到成功响应时,文档变更已经在主分片和所有副本分片执行完成,变更是安全的。

    取回单个文档

    elas_0403.png

    以下是从主分片或者副本分片检索文档的步骤顺序:

    1、客户端向 Node 1 发送获取请求
    2、节点使用文档的 _id 来确定文档属于分片 0 。分片 0 的副本分片存在于所有的三个节点上。 在这种情况下,它将请求转发到 Node 2
    3、Node 2 将文档返回给 Node 1 ,然后将文档返回给客户端。

    在处理读取请求时,协调结点在每次请求的时候都会通过轮询所有的副本分片来达到负载均衡

    局部更新文档

    elas_0404.png

    以下是部分更新一个文档的步骤:

    1. 客户端向 Node 1 发送更新请求。
    2. 它将请求转发到主分片所在的 Node 3
    3. Node 3 从主分片检索文档,修改 _source 字段中的 JSON ,并且尝试重新索引主分片的文档。 如果文档已经被另一个进程修改,它会重试步骤 3 ,超过 retry_on_conflict 次后放弃。
    4. 如果 Node 3 成功地更新文档,它将新版本的文档并行转发到 Node 1Node 2 上的副本分片,重新建立索引。 一旦所有副本分片都返回成功, Node 3 向协调节点也返回成功,协调节点向客户端返回成功。

    update API 还接受在 新建、索引和删除文档 章节中介绍的 routingreplicationconsistencytimeout 参数。

    使用 mget 取回多个文档

    image.png

    以下是使用单个 mget 请求取回多个文档所需的步骤顺序:

    1. 客户端向 Node 1 发送 mget 请求。
    2. Node 1 为每个分片构建多文档获取请求,然后并行转发这些请求到托管在每个所需的主分片或者副本分片的节点上。一旦收到所有答复, Node 1 构建响应并将其返回给客户端。

    可以对 docs 数组中每个文档设置 routing 参数。

    使用 bulk 修改多个文档

    image.png

    bulk API按如下步骤顺序执行:

    1. 客户端向 Node 1 发送 bulk 请求。
    2. Node 1 为每个节点创建一个批量请求,并将这些请求并行转发到每个包含主分片的节点主机。
    3. 主分片一个接一个按顺序执行每个操作。当每个操作成功时,主分片并行转发新文档(或删除)到副本分片,然后执行下一个操作。 一旦所有的副本分片报告所有操作成功,该节点将向协调节点报告成功,协调节点将这些响应收集整理并返回给客户端。

    bulk API 还可以在整个批量请求的最顶层使用 consistency 参数,以及在每个请求中的元数据中使用 routing 参数。

    相关文章

      网友评论

          本文标题:elasticsearch 内部存储执行机制

          本文链接:https://www.haomeiwen.com/subject/ynforftx.html