zipkin原理

作者: tommyhxh | 来源:发表于2018-06-15 14:19 被阅读0次

    通过zipkin的表结构,理解dapper;trace把多个span进行串接;
    形成依赖链路。

    结构

    zipkin主要包括:collector、storage、search、webui;
    zipkin collector会对一个到来的被trace的数据(span)进行验证、存储并设置索引。
    其中storage包括:内存、mysql、es、cassandra。

    数据结构

    Annotation:用于定位一个request的开始和结束,cs/sr/ss/cr含有额外的信息,比如说时间点,当这个annotation被记录了,这个RPC也被认为完成了。

         cs:Client Start,表示客户端发起请求 ;一个span的开始;
         cr:Client Received,表示客户端获取到服务端返回信息;一个span的结束
    
         sr:Server Receive,表示服务端收到请求
         ss:Server Send,表示服务端完成处理,并将结果发送给客户端
    
        sr-cs:网络延迟
        ss-sr:逻辑处理时间
        cr-cs:整个流程时间
    

    Span:一个请求(包含一组Annotation和BinaryAnnotation);它是基本工作单元,一次链路调用(可以是RPC,DB等没有特定的限制)创建一个span,通过一个64位ID标识它。span通过还有其他的数据,例如描述信息,时间戳,key-value对的(Annotation)tag信息,parent-id等,其中parent-id 可以表示span调用链路来源,通俗的理解span就是一次请求信息。

    Trace:类似于树结构的Span集合,表示一条调用链路,存在唯一标识
    Traces are built by collecting all Spans that share a traceId。通过traceId、spanId和parentId,被收集到的span会汇聚成一个tree,从而提供出一个request的整体流程。

    流程图

    image.png

    表设计

    1.span表

    CREATE TABLE IF NOT EXISTS zipkin_spans (
      `trace_id` BIGINT NOT NULL,
      `id` BIGINT NOT NULL,
      `name` VARCHAR(255) NOT NULL,
      `parent_id` BIGINT,
      `debug` BIT(1),
      `start_ts` BIGINT 
       COMMENT 'Span.timestamp(): epoch micros used for endTs query and to implement 
       TTL',
      `duration` BIGINT 
    COMMENT 'Span.duration(): micros used for minDuration and maxDuration query'
    ) ENGINE=InnoDB ROW_FORMAT=COMPRESSED;
    

    一些约束

    ALTER TABLE zipkin_spans ADD UNIQUE KEY(`trace_id`, `id`) 
    COMMENT 'ignore insert on duplicate';
    ALTER TABLE zipkin_spans ADD INDEX(`trace_id`, `id`) 
    COMMENT 'for joining with zipkin_annotations';
    ALTER TABLE zipkin_spans ADD INDEX(`trace_id`) 
    COMMENT 'for getTracesByIds';
    ALTER TABLE zipkin_spans ADD INDEX(`name`) 
    COMMENT 'for getTraces and getSpanNames';
    ALTER TABLE zipkin_spans ADD INDEX(`start_ts`) 
    COMMENT 'for getTraces ordering and range';
    
    CREATE TABLE IF NOT EXISTS zipkin_annotations (
      `trace_id` BIGINT NOT NULL COMMENT 'coincides with zipkin_spans.trace_id',
      `span_id` BIGINT NOT NULL COMMENT 'coincides with zipkin_spans.id',
      `a_key` VARCHAR(255) NOT NULL 
                COMMENT 'BinaryAnnotation.key or Annotation.value if type == -1',
      `a_value` BLOB 
                COMMENT 'BinaryAnnotation.value(), which must be smaller than 64KB',
      `a_type` INT NOT NULL COMMENT 'BinaryAnnotation.type() or -1 if Annotation',
      `a_timestamp` BIGINT 
              COMMENT 'Used to implement TTL; Annotation.timestamp or         
              zipkin_spans.timestamp',
      `endpoint_ipv4` INT COMMENT 'Null when Binary/Annotation.endpoint is null',
      `endpoint_ipv6` BINARY(16) 
            COMMENT 'Null when Binary/Annotation.endpoint is null, or no IPv6 address',
      `endpoint_port` SMALLINT COMMENT 'Null when Binary/Annotation.endpoint is null',
      `endpoint_service_name` VARCHAR(255) COMMENT 'Null when 
              Binary/Annotation.endpoint is null'
    ) ENGINE=InnoDB ROW_FORMAT=COMPRESSED;
    
    ALTER TABLE zipkin_annotations ADD UNIQUE KEY(`trace_id`, `span_id`, `a_key`, `a_timestamp`)
     COMMENT 'Ignore insert on duplicate';
    ALTER TABLE zipkin_annotations ADD INDEX(`trace_id`, `span_id`)
     COMMENT 'for joining with zipkin_spans';
    ALTER TABLE zipkin_annotations ADD INDEX(`trace_id`) COMMENT 'for getTraces/ByIds';
    ALTER TABLE zipkin_annotations ADD INDEX(`endpoint_service_name`) 
    COMMENT 'for getTraces and getServiceNames';
    ALTER TABLE zipkin_annotations ADD INDEX(`a_type`) COMMENT 'for getTraces';
    ALTER TABLE zipkin_annotations ADD INDEX(`a_key`) COMMENT 'for getTraces';
    

    3.依赖关系

    CREATE TABLE IF NOT EXISTS zipkin_dependencies (
      `day` DATE NOT NULL,
      `parent` VARCHAR(255) NOT NULL,
      `child` VARCHAR(255) NOT NULL,
      `call_count` BIGINT
    ) ENGINE=InnoDB ROW_FORMAT=COMPRESSED;
    
    ALTER TABLE zipkin_dependencies ADD UNIQUE KEY(`day`, `parent`, `child`);
    
    

    相关文章

      网友评论

        本文标题:zipkin原理

        本文链接:https://www.haomeiwen.com/subject/ucqblftx.html