博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
【第三十章】 elk(1) - 第一种架构(最简架构)
阅读量:6282 次
发布时间:2019-06-22

本文共 2625 字,大约阅读时间需要 8 分钟。

软件版本:

  • es:2.4.0
  • logstash:2.4.0
  • kibana:4.6.1

 

一、logstash安装(收集、过滤日志、构建索引)

1、下载:https://www.elastic.co/downloads/

2、解压

3、启动

  • cd /Users/enniu1/Desktop/server/elk/logstash-2.4.0/bin

  • ./logstash -e 'input{stdin{}} output{stdout{codec=>rubydebug}}'

    • -e:用于快速测试的时候指定参数
    • codec:美化输出格式
    • 仅用于测试

4、测试

命令行输入:hello jigang

输出:

{        "message" => "hello jigang",       "@version" => "1",     "@timestamp" => "2016-09-17T10:41:31.215Z",           "host" => "ShaoFeng51deMacBook-Pro.local" }

注意:以上是logstash最常见的输出形式。

  • message:完整的输入信息或事件
  • host:事件发生的主机
  • @timestamp:事件被索引时的时间。

5、生产环境

使用配置文件配置input、filter、output信息

  • 自己创建配置文件:/Users/enniu1/Desktop/server/elk/logstash-2.4.0/conf/logstash.conf
    input {    stdin {}}filter {    }output {    elasticsearch { hosts => ["127.0.0.1:9200"] }}
    • 以上配置将所有的输入信息都输出到es中,这是最常见的输出地方。
    • 还有一种elk架构使用redis作为broker来接收logstash收集到的数据,之后进行indexer,这是高数量情况下的首选,redis会担当一个消息队列的角色。

    logstash配置文件配置文档:https://www.elastic.co/guide/en/logstash/current/configuration.html

    之后启动logstash:./logstash -f ../conf/logstash.conf

    至此,logstash配置安装成功!!!

     

    二、es安装(搜索、存储日志)

    1、下载:https://www.elastic.co/downloads/

    2、解压

    3、配置文件:elasticsearch-2.4.0/config/elasticsearch.yml

    # Use a descriptive name for your cluster:集群将根据这个名字来自动发现和加入节点cluster.name: mymicroservice-elknode.name: node-es-1path.data: /Users/enniu1/Desktop/microservice/elk/es/datapath.logs: /Users/enniu1/Desktop/microservice/elk/es/logsnetwork.host: 127.0.0.1http.port: 9200

    4、启动

    • cd/Users/enniu1/Desktop/server/elk/elasticsearch-2.4.0/bin
    • nohup ./elasticsearch &

    5、测试

    浏览器输入:http://127.0.0.1:9200/,输出:

    {  "name" : "node-es-1",  "cluster_name" : "mymicroservice-elk",  "version" : {    "number" : "2.4.0",    "build_hash" : "ce9f0c7394dee074091dd1bc4e9469251181fc55",    "build_timestamp" : "2016-08-29T09:14:17Z",    "build_snapshot" : false,    "lucene_version" : "5.5.2"  },  "tagline" : "You Know, for Search"}

    成功!!!

    注意:为了更好的使用并查看es的使用情况,安装Kopf插件。

    Kopf插件地址:https://github.com/lmenezes/elasticsearch-kopf

    插件安装文档:https://www.elastic.co/guide/en/elasticsearch/plugins/current/installation.html

    安装命令:

    • cd/Users/enniu1/Desktop/server/elk/elasticsearch-2.4.0/bin
    • ./plugin install lmenezes/elasticsearch-kopf

    安装插件之后重启es,浏览器输入:127.0.0.1:9200/_plugin/kopf,输出

    成功!!!

     

    三、kibana安装(展示日志信息)

    1、下载:https://www.elastic.co/downloads/

    2、解压

    3、配置文件:/Users/enniu1/Desktop/server/elk/kibana-4.6.1/config

    1 server.host: "127.0.0.1"2 server.port: 56013 elasticsearch.url: "http://127.0.0.1:9200"

    4、启动

    • cd /Users/enniu1/Desktop/server/elk/kibana-4.6.1/bin
    • ./kibana

    5、测试

    浏览器输入:http://127.0.0.1:5601/

    输出:

    在此页面,点击"create"按钮,进行index的构建。

    至此,kibana配置安装启动成功!!!

     

    四、形成完整通道

    在logstash终端输入:hello jigang

    在kibana的Discover部分查看日志:

    elk最简架构搭建完成!!!

转载地址:http://hziva.baihongyu.com/

你可能感兴趣的文章
C# 泛型编程之泛型类、泛型方法、泛型约束
查看>>
MAT文件操作
查看>>
【英语天天读】Heart of a stranger 陌生的心灵
查看>>
wp7 Emulator模拟器停止工作原因
查看>>
iBATIS.net直接执行sql语句
查看>>
Matlab Command Window 进度提示
查看>>
Windows on Device 项目实践 3 - 火焰报警器制作
查看>>
数据库备份与还原SQL代码
查看>>
http的请求和响应过程1
查看>>
ASP.NET Core: 全新的ASP.NET !
查看>>
64位下的Visual Studio的编辑并继续
查看>>
beanstalkd 消息队列的第一手资料
查看>>
前段时间是Flash大战HTML5,现在是SliverLight“被遗弃”,我啊羡慕你们的热闹。...
查看>>
Android 开发环境的配置
查看>>
Module-Zero之版本管理
查看>>
Bash : 索引数组
查看>>
[WPF学习资料] WPF简介
查看>>
Spring + SpringMVC + Druid + MyBatis 给你一个灵活的后端解决方案
查看>>
Linux系统安装VMware Tools
查看>>
asp.net 页面右下角弹出类似QQ或MSN的消息提示
查看>>