Yezhiwei Blog

平时多流汗，战时少流血！

1分钟系列-在 Kibana 安装和使用 Nginx 的日志仪表盘

配置 Filebeat # filebeat 安装在 192.168.111.238 服务器上 cd /usr/local/filebeat-6.6.1-linux-x86_64 vi filebeat-nginx-es-dashboard.yml # 将以下内容拷贝到 filebeat-nginx-es-dashboard.yml 文件中 filebeat.inputs: - type...

Posted by Yezhiwei on May 20, 2020

1分钟系列-Kibana 简介与数据探索

在 Elasticsearch 查看数据在数据浏览查看索引数据，如下图：下面分享在 Kibana 中查看数据，一张图片胜过千万行日志 Kibana 简介 Kibana 是一款开源的数据分析和可视化平台，它是 Elastic Stack 成员之一，设计用于和 Elasticsearch 协作。可以使用 Kibana 对 Elasticsearch 索引中的数据进行搜索、查看、交互操作...

Posted by Yezhiwei on May 18, 2020

1分钟系列-Filebeat 模块之 Nginx 配置使用

背景在上一篇分享中，我们发现数据采集到的日志数据都在 message 属性里，本次分享如何利用模块格式化日志信息 Filebeat Module Filebeat 内置提供了许多开箱即用的 modules ，对日志文件做简单的收集和解析处理，可以简化我们的配置，直接使用就可以 cd /usr/local/filebeat-7.6.2-linux-x86_64 # 查看支持哪些模块 ./f...

Posted by Yezhiwei on May 14, 2020

1分钟系列-Filebeat 采集数据保存到 Elasticsearch

Filebeat 采集日志到架构从上面的架构图中，我们可以看到 Beats 与 Nginx 部署在同一台机器上，目的是收集 Nginx 上的访问日志进行分析读取 Nginx 日志文件读取文件配置 # 配置读取日志文件 filebeat-log.yml filebeat.inputs: - type: log enabled: true paths: - /usr/l...

Posted by Yezhiwei on May 13, 2020

1分钟系列-Filebeat简介与安装

Beats 轻量型数据采集器 Beats 平台集合了多种单一用途数据采集器。它们从成百上千或成千上万台机器和系统向 Logstash 或 Elasticsearch 发送数据。 Beats 系列全品类采集器，搞定所有数据类型。 Beats 可以直接将数据发送到 Elasticsearch 或通过 Logstash，在Kibana 中可视化之前，可以进一步处理和增强数据。 Filebea...

Posted by Yezhiwei on May 12, 2020

1分钟系列-Nginx 安装，准备访问日志

Nginx 简介 Nginx 是一款轻量级的 Web 服务器、反向代理服务器，由于它的内存占用少，启动极快，高并发能力强，在互联网项目中广泛应用。而 Nginx 的访问日志不管是做用户行为分析还是安全分析都是非常重要的数据源之一。如何有效便捷的采集 Nginx 的日志进行有效的分析成为大家关注的问题（下一节分享 Filebeat 进行日志采集）。 Nginx 互联网架构高可用 Nginx ...

Posted by Yezhiwei on May 11, 2020

1分钟系列-Elasticsearch 集群安装与常见问题

集群安装 Elasticsearch 简介请参考上篇配置文件修改配置文件位置 config/elasticsearch.yml 集群的名称通过 cluster.name 可以配置集群的名称，集群是一个整体，因此名称都要一致，所有主机都配置成相同的名称，配置示例： cluster.name: my-es-application 节点的名称通过 node.name 可以...

Posted by Yezhiwei on May 10, 2020

1分钟系列-Elasticsearch 简介与单机版安装

Elasticsearch 简介 Elasticsearch 是一个分布式的开源搜索和分析引擎，适用于所有类型的数据，包括文本、数字、地理空间、结构化和非结构化数据。Elasticsearch 在 Apache Lucene 的基础上开发而成，以其简单的 RESTful API、分布式特性、速度和可扩展性而闻名，是 Elastic Stack 的核心组件。 Elasticsearch 使...

Posted by Yezhiwei on May 9, 2020

1分钟系列-Elastic Stack（ELK）简介

Elastic Stack 简介 Elastic Stack 是 ELK Stack 的更新换代产品，那么，ELK 到底是什么呢？ “ELK”是三个开源项目的首字母缩写，这三个项目分别是：Elasticsearch、Logstash 和 Kibana。 Elasticsearch 是开源的分布式搜索引擎基于 JSON 开发而来，具有 RESTful 风格。它使用简单，可缩放规模，十分灵...

Posted by Yezhiwei on May 7, 2020

掌门1对1微服务体系Solar第1弹：全链路灰度蓝绿发布智能化实践

原文链接：https://mp.weixin.qq.com/s/o_BYQ8Gz_YIykgTVR8yO9A 掌门教育自 2014 年正式转型在线教育以来，秉承“让教育共享智能，让学习高效快乐”的宗旨和愿景，经历云计算、大数据、人工智能、AR/VR/MR 以及现今最火的 5G，一直坚持用科技赋能教育。掌门教育的业务近几年得到了快速发展，特别是今年的疫情，使在线教育成为了新的风口，也给掌门...

Posted by Yezhiwei on May 1, 2020