没有合适的资源?快使用搜索试试~ 我知道了~
首页开源实时日志分析ELK系统搭建说明
开源实时日志分析ELK系统搭建说明
需积分: 50 35 下载量 30 浏览量
更新于2023-03-16
评论 2
收藏 815KB PDF 举报
自己通过5天时间在Ubuntu14.04 Server亲自搭建master节点和node节点,实验成功后亲自编写的《开源实时日志分析ELK系统搭建说明》,分虽然高一些,但是内容看了很值得,包含搭建、实验、排错等环节,谢谢大家~。
资源详情
资源评论
资源推荐
开源实时日志分析 ELK 搭建说明
zhengzhiguo@sapling.com.cn
2016.04.25
目 录
1、ELK 系统说明 .............................................................................................................................. 1
2、环境搭建..................................................................................................................................... 2
2.1 拓扑 .................................................................................................................................... 2
2.2 软件安装............................................................................................................................. 2
2.2.1 安装 Ubuntu14.04 x64 ........................................................................................ 2
2.2.2 安装 Ubuntu 安装与配置基本信息 ..................................................................... 2
2.2.3 安装 JAVA 运行环境 ............................................................................................. 3
2.2.4 安装 Elasticsearch ............................................................................................ 3
2.2.5 安装 Kibana .......................................................................................................... 4
2.2.6 安装 Nginx ............................................................................................................ 6
2.2.7 安装 logstash ...................................................................................................... 6
2.2.8 制作证书 ............................................................................................................... 6
2.2.9 设定 logstash ...................................................................................................... 7
2.2.10 ElkNote 节点配置 .............................................................................................. 8
3、基本功能验证 ............................................................................................................................. 8
4、常见错误..................................................................................................................................... 9
5.1 Master 节点 ........................................................................................................................ 9
5.1.1 打开 http 页面无法找到映射关系 ...................................................................... 9
5.1.2 Kibana 服务启动失败 ........................................................................................ 10
5.1.3 访问 kibana 出现下面错误信息 ....................................................................... 10
5.1.4 logstash 服务启动失败 .................................................................................... 10
5.2 Node 节点 ......................................................................................................................... 10
5.2.1 Node 节点的 logstash-forwarder 启动失败 .................................................. 10
5.2.2 SSL Certificate is Missing or Invalid ................................................... 10
5.3 通用排错逻辑 .................................................................................................................. 10
5.3.1 查看排错日志 ...................................................................................................... 11
5.3.2 有关中英文字符问题 .......................................................................................... 11
1、 ELK 系统说明
ELK 是三个开源软件的缩写,分别表示:Elasticsearch, Logstash, Kibana。其中 Elasticsearch 是用于实现索引
和搜索功能目的,Logstash 是一个很灵活的日志收集和处理工具。Kibana 是和 Elasticsearch 配套的图形展示
界面,用于方便的展示数据和分析数据。本文对整个套件的安装配置过程做一个详细的记录。现在很多公
司使用 ELK 技术栈做日志分析,比如新浪使用 ELK 处理每天 32 亿条记录,本文主要介绍了一个详细的环境
搭建过程,以供技术调研与参考。
2、环境搭建
2.1 拓扑
2.2 软件安装
2.2.1 安装 Ubuntu14.04 x64
下载地址:http://releases.ubuntu.com/14.04/ubuntu-14.04.4-server-amd64.iso
2.2.2 安装 Ubuntu 安装与配置基本信息
在 Master 节:
配置接口信息后执行 ifdown eth0 ;ifup eth0 操作生效
配置 DNS 信息:
配置 Hosts 信息:
注意:
1、在 Node 节点中按照此逻辑依次配置接口、DNS、以及主机信息。
2、Master 和 Node 节点都需要预先安装 vim,ntp,curl,lrzsz 四款工具,执行 apt-get install vim ntp curl lrxsz 进
行安装。
2.2.3 安装 JAVA 运行环境
Step1.add-apt-repository -y ppa:webupd8team/java
Step2.apt-get update
Step3.apt-get -y install oracle-java8-installer
提示:java 相关安装包较大,安装时间较长,若您是 vmware 安装后建议做一个快照,以备后续安装其它软
件失败时,恢复从此步开始重新安装。
2.2.4 安装 Elasticsearch
Step1.wget –qO – https://packages.elastic.co/GPG-KEY-elasticsearch | apt-key add
Step2.echo ”deb http://packages.elastic.co/elasticsearch/2.x/debian stable main” | sudo tee -a
/etc/apt/sources.list.d/elasticsearch-2.x.list
Step3.apt-get update
Step4.apt-get -y install elasticsearch
Step5.修改/etc/elasticsearch/elasticsearch.yml 文件
将 cluster.name、network.host、http.port 三个配置项内容按图所示进行修改为 Master 节点信息,并将前边”#”
注释去除,使其功能生效:
剩余10页未读,继续阅读
LeoJimmy
- 粉丝: 0
- 资源: 6
上传资源 快速赚钱
- 我的内容管理 收起
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
会员权益专享
最新资源
- 2023年中国辣条食品行业创新及消费需求洞察报告.pptx
- 2023年半导体行业20强品牌.pptx
- 2023年全球电力行业评论.pptx
- 2023年全球网络安全现状-劳动力资源和网络运营的全球发展新态势.pptx
- 毕业设计-基于单片机的液体密度检测系统设计.doc
- 家用清扫机器人设计.doc
- 基于VB+数据库SQL的教师信息管理系统设计与实现 计算机专业设计范文模板参考资料.pdf
- 官塘驿林场林防火(资源监管)“空天地人”四位一体监测系统方案.doc
- 基于专利语义表征的技术预见方法及其应用.docx
- 浅谈电子商务的现状及发展趋势学习总结.doc
- 基于单片机的智能仓库温湿度控制系统 (2).pdf
- 基于SSM框架知识产权管理系统 (2).pdf
- 9年终工作总结新年计划PPT模板.pptx
- Hytera海能达CH04L01 说明书.pdf
- 数据中心运维操作标准及流程.pdf
- 报告模板 -成本分析与报告培训之三.pptx
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功
评论0