springboot——整合资源，搭建实时平台

elk 简介

Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。

Logstash是一个完全开源的工具，他可以对你的日志进行收集、过滤，并将其存储供以后使用（如，搜索）。

Kibana 也是一个开源和免费的工具，它Kibana可以为 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面，可以帮助您汇总、分析和搜索重要数据日志。

elk下载安装

有需要的联系我2317384986    yxxy1717

elk下载地址：https://www.elastic.co/downloads/

建议在 linux上运行，elk在windows上支持得不好，另外需要jdk1.8 的支持，需要提前安装好jdk.

下载完之后： 安装，以logstash为栗子：

cd /usr/local/

mkdir logstash

tar -zxvf logstash-5.3.2.tar.gz

mv logstash-5.3.2 /usr/local/logstash

配置、启动 Elasticsearch

打开Elasticsearch的配置文件：

vim config/elasticsearch.yml

1

修改配置:

network.host=localhostnetwork.port=9200

1

2

3

它默认就是这个配置，没有特殊要求，在本地不需要修改。

启动Elasticsearch

./bin/elasticsearch

1

2

启动成功，访问localhost:9200,网页显示：

{  "name" :"56IrTCM",  "cluster_name" :"elasticsearch",  "cluster_uuid" :"e4ja7vS2TIKI1BsggEAa6Q",  "version" :{    "number" :"5.2.2",    "build_hash" :"f9d9b74",    "build_date" :"2017-02-24T17:26:45.835Z",    "build_snapshot" :false,    "lucene_version" :"6.4.1"},  "tagline" :"You Know, for Search"}

1

2

3

4

5

6

7

8

9

10

11

12

13

配置、启动 logstash

在 logstash的主目录下：

vim config/log4j_to_es.conf

1

2

修改 log4j_to_es.conf 如下：

input {  log4j {    mode=>"server"host=>"localhost"port=>4560}}filter {#Onlymatcheddataare sendtooutput.}output {    elasticsearch {    action=>"index"#TheoperationonES    hosts=>"localhost:9200"#ElasticSearchhost, can bearray.index=>"applog"#Theindextowritedatato.}}

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

修改完配置后启动：

./bin/logstash-fconfig/log4j_to_es.conf

1

2

终端显示如下：

访问localhost:9600

{"host":"Pc-20130412.local","version":"5.3.2","http_address":"127.0.0.1:9600","id":"e6bb985c-c688-49a4-a55b-4d362bb4136f","name":"Pc-20130412.local","build_date":"2017-04-24T16:32:22Z","build_sha":"242159a5eea55fe213fe5c852d36455e24252c82","build_snapshot":false}

1

2

3

4

证明logstash启动成功。

配置、启动kibana

到kibana的安装目录：

./bin/kibana

1

默认配置即可。

访问localhost:5601，网页显示：

证明启动成功。

创建springboot工程

起步依赖如下：

org.springframework.bootspring-boot-starterorg.springframework.bootspring-boot-starter-loggingorg.springframework.bootspring-boot-starter-log4j1.3.8.RELEASEorg.springframework.bootspring-boot-starter-testtest

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

log4j的配置，／src/resources/log4j.properties如下：

log4j.rootLogger=INFO,console# for package com.demo.elk, log would be sent to socket appender.log4j.logger.com.forezp=DEBUG, socket# appender socketlog4j.appender.socket=org.apache.log4j.net.SocketAppenderlog4j.appender.socket.Port=4560log4j.appender.socket.RemoteHost=localhostlog4j.appender.socket.layout=org.apache.log4j.PatternLayoutlog4j.appender.socket.layout.ConversionPattern=%d [%-5p] [%l] %m%nlog4j.appender.socket.ReconnectionDelay=10000# appender consolelog4j.appender.console=org.apache.log4j.ConsoleAppenderlog4j.appender.console.target=System.outlog4j.appender.console.layout=org.apache.log4j.PatternLayoutlog4j.appender.console.layout.ConversionPattern=%d [