美文网首页
ElasticSearch Rpc-Server端处理流程

ElasticSearch Rpc-Server端处理流程

作者: 秦汉邮侠 | 来源:发表于2018-04-30 11:17 被阅读64次

ES Rest/Rpc流程

  • image.png

Rpc-Server端处理流程

  • 上图红色标识部分
  • 服务端流程.png

调试流程

  • 在RpcServer的消息处理入口的地方放置断点Netty4MessageChannelHandler
  • 启动一个TransportClient,发送一个查询请求,看断点能否命中
  • 1个查询请求后,发现断点经常命中
  • 发现有三类消息:Liveness,HandShake和真正的业务消息
  • 从客户端日志可以看到indices:data/read/get这样的消息
  • 在服务端设置条件断点action.contains("indices:data/read/get")
  • image.png

调试代码

  • ES服务端 5.6
  • 客户端代码
   @Test
     public void test1(){
          try {
               Settings settings = Settings.builder().put("cluster.name", "distribution_run").build();
               TransportClient client = new PreBuiltTransportClient(settings)
                       .addTransportAddress(new InetSocketTransportAddress(InetAddress.getByName("127.0.0.1"), 9300));
               GetResponse response = client.prepareGet("website", "blog", "AWMHVaesXwpGuvHHNcVg").execute().actionGet();
               //输出结果
               System.out.println(response.getSourceAsString());
               //关闭client
               client.close();
          } catch (UnknownHostException e) {

          }
          //QueryBuilder qb1 = QueryBuilders.matchAllQuery();
     }
  • Maven配置
        <dependency>
            <groupId>org.elasticsearch.client</groupId>
            <artifactId>transport</artifactId>
            <version>5.6.9</version>
        </dependency>
        <dependency>
            <groupId>org.appenders.log4j</groupId>
            <artifactId>log4j2-elasticsearch-core</artifactId>
            <version>1.1.1</version>
        </dependency>
  • 客户端日志配置
<?xml version="1.0" encoding="UTF-8"?>
<configuration status="OFF">
    <appenders>
        <Console name="Console" target="SYSTEM_OUT">
            <PatternLayout pattern="%d{HH:mm:ss.SSS} [%t] %-5level %logger{36} - %msg%n"/>
        </Console>
    </appenders>
    <loggers>
        <logger name="com.relin.HelloLog4j" level="error" additivity="false">
            <appender-ref ref="Console"/>
        </logger>
        <root level="trace">
            <appender-ref ref="Console"/>
        </root>
    </loggers>
</configuration>

代码分析

  • image.png
  • ES为不同类型的操作提供不同类型的线程池,总共有15中,调试上述代码使用的SANE,对应的线程池执行器是DIRECT_EXECUTOR_SERVICE
  • image.png
  • image.png
  • 线程池所有类型的定义以及类型和执行器的对应关系都在ThreadPool类中
  • TransportClient请求和对应Transport*Action的对应关系是怎么样的
  • TransportClient发送业务请求都会带一个类似于indices:data/read/get的消息
  • Transport*Action注入的时候都会带一个ActionName的属性名
    @Inject
    public TransportGetAction(Settings settings, ClusterService clusterService, TransportService transportService,
                              IndicesService indicesService, ThreadPool threadPool, ActionFilters actionFilters,
                              IndexNameExpressionResolver indexNameExpressionResolver) {
        super(settings, GetAction.NAME, threadPool, clusterService, transportService, actionFilters, indexNameExpressionResolver,
                GetRequest::new, ThreadPool.Names.GET);
        this.indicesService = indicesService;
    }
    public static final GetAction INSTANCE = new GetAction();
    public static final String NAME = "indices:data/read/get";

相关文章

  • ElasticSearch Rpc-Server端处理流程

    ES Rest/Rpc流程 image.png Rpc-Server端处理流程 上图红色标识部分 服务端流程.pn...

  • 【es】Elasticsearch如何保证数据不丢失?

    我们大概已经知道了 Elasticsearch处理数据的流程,其中在Elasticsearch和磁盘之间还有一层称...

  • 音视频处理流程

    分为2个流程 直播客户端的处理流程 音频数据的流转 直播客户端的处理流程 音频数据的流转 PCM:是设备采集到数据...

  • Future模式

    Future模式 概念 处理流程 传统处理流程 客户端发出call请求,这个请求需要很长一段时间才能返回。客户端一...

  • go语言TCP编程入门

    服务端 服务端的处理流程 监听端口8888 接收客户端的tcp连接 创建gorountine,处理该链接的请求(通...

  • 学习技术要注意的逼格点

    技术类: 使用层面 点: 客户端: 安装、使用、使用语言。。。 流程:处理流程、处理的数据结构(常规集合。。。) ...

  • reusable:前端可复用代码目录结构的设计

    前端开发的流程 前端开发的主要流程就是取服务端的数据处理后渲染到本地ui,或者取本地ui的数据处理后发送到服务端,...

  • ES源码第一弹:启动

    类关系图 流程分析 在Elasticsearch的org.elasticsearch.boot...

  • 灵活的版本更新库封装

    PrimUpdate 灵活的版本更新库 客户端处理版本更新流程分析 版本更新封装流程分析 UpdateManage...

  • zookeeper的原理-watcher

    Watcher 的基本流程 分为3个步骤:客户端注册watcher,服务端处理watcher和客户端回调watch...

网友评论

      本文标题:ElasticSearch Rpc-Server端处理流程

      本文链接:https://www.haomeiwen.com/subject/mxjwlftx.html