1、elk说明 elk全称： elasticsearch: 是一个分布式、高扩展、高实时的搜索与数据分析引擎;简称es logstash: 是开源的服务器端数据处理管道，能够同时从多个来源采集数据，转换数据，然后将数据发送到您最喜欢的存储库中;如elasticsearch中 kibana: 是为 Ela...

前言 自从上篇文章《三层交换机的工作原理》发布后，有很多的网络爱好者私底下与我取得了联系，针对当前的TCP/IP网络做了很多的探讨，从这些爱好者身上我也学习到了很多，正所谓活到老，学到老;看这些爱好者对网络的技术的那种热爱与激情，也给我们写作者增加...

一、什么是VLAN VLAN(Virtual LAN)，翻译成中文是虚拟局域网。LAN可以是由少数几台家用计算机构成的网络，也可以是数以百计的计算机构成的企业网络。VLAN所指的LAN特指使用路由器分割的网络也就是广播域。 二、实现VLAN的机制 1. 实现VLAN的机制 首先，在一...

一、LVS-NAT模式的工作原理 这个是通过网络地址转换的方法来实现调度的。首先调度器(LB)接收到客户的请求数据包时（请求的目的IP为VIP），根据调度算法决定将请求发送给哪个 后端的真实服务器（RS）。然后调度就把客户端发送的请求数据包的目标IP地址及端口...

一、前言: 当一组服务器在高速的局域网或广域网中相互连接，其前端部署了一个负责负载调度的调度器（director）的服务系统，调度器能将网络请求无缝衔接调度到真实的服务器上（real server）上，客户访问集群系统提供的网络服务就像访问一台高性能，高可用的...

Lvs原理 Lvs-NAT模式注意事项 Lvs-Nat模式图解 Lvs配置 保存ipvsadm策略方法 测试： Lvs原理 当客户端的请求到达负载均衡器的内核空间时，首先会到达PREROUTING链。 当内核发现请求数据包的目的地址是本机时，将数据包送往INPUT链。 LVS由用户空间的ipvsadm...

一.什么是LVS-NAT: 基于NAT机制实现。当用户请求到达director之后，director将请求报文的目标地址（即VIP）改成选定的realserver地址，同时 将报文的目标端口也改成选定的realserver的相应端口，最后将报文请求发送到指定的realserver。在服务器端得到数据...

一、准备工作LVS Server LVS Server：LSV Server有两张网卡，作用如下： eth0：192.168.3.10：这张网卡对应一个封闭的内网，不能访问外网资源，外网也不能直接通过这个IP访问这台主机； eth1：192.168.2.100：这张网卡设置的IP可以访问外网，也可以被外网访问...

LVS-NAT模式和LVS-DR模式区别 NAT模式通过分发器做DNAT改变目标mac地址 数据进出必须经过分发器 realserver达到多台是会影响服务器的上传速度 DR直接路由解决了对分发器造成的负担 通过网关路由接收到用户的请求 通过分发器访问分发器IP 分发器看到目标地址和...

LVS LVS是 Linux Virtual Server 的简称，也就是Linux虚拟服务器。LVS 是一个实现负载均衡集群的开源软件项目，LVS架构从逻辑上可分为调度层、Server集群层和共享存储。 LVS的组成 一般来说，LVS集群采用三层结构，三层主要组成部分为： 1 负载调度器（load b...

今天在继续redis的压力测试时，发现一个奇怪的现象，我本机可以访问的通LVS主机，但测试服务器却不行。在请教运维部的同事之后才知道，原来LVS-NAT模式下，客户端是不能和RS在一个网段的（ :cry: 知识欠缺啊，以前只耍过DR模式）。 但是真的不能么？google一...

LVS相关实验： 实验一：LVS-NAT模式案例 实验示意图： 实验1.1:rr调度算法： 1，调整好各个实验主机的主机环境，调整IP，关闭防火墙； 2，LVS、RS1和RS2安装net-tools工具，安装http;LVS上安装ipvsadm工具； 3，将RS1和RS2的网卡网关指向LVS的DIP： 4，开启L...

2案例2：部署LVS-NAT集群 2.1问题 使用LVS实现NAT模式的集群调度服务，为用户提供web服务： 集群对外公网ip地址为192.168.4.5 调度器内网ip地址为192.168.2.5 真实web服务器地址分别为192.168.2.100、192.168.2.200 使用加权轮询调度算法，真实服务器权重分...

LVS是LB的一种解决方案，常见的架构模式有NAT、DR、TUN、FULLNAT。 LVS-NAT模型拓扑图： 下面是NAT架构解决方案示意图： 从客户端发起一个请求到服务器端响应的过程大概是这样的： 1.首先客户端会访问服务器的域名，经过层层路由将请求报文发送给Director，...

随着internet的网络迅速发展，IP地址短缺已成为一个十分突出的问题。为了解决这个问题，出现了多种解决方案。下面几绍一种在目前网络环境中比较有效的方法即地址转换(NAT)功能。 一、NAT简介 NAT(Network Address Translation)的功能，就是指在一个网络内部...

1、首先拉jenkins包，jenkins是java,我用的是centos7，以配好了jdk,最低1.8版本 2、安装jenkins yum -y localinstall jenkins-2.121.3-1.1.noarch.rpm 3、启动jenkins,查看端口是否启动，启动较慢 systemctl start jenkins Jenkins安装插件 安装插件git Publ...

1、es集群安装完毕 2、下载IK 源码下载：https://github.com/medcl/elasticsearch-analysis-ik 3、解压到到ES_HOME/plugins/ik目录下面(直接包含一个conf文件夹和一堆.jar包) 重新启动ES，启动 看到try load config IK相关信息，说明启动完成和安装IK插件完...

搭建最新版本的elasticsearch7.5 集群 环境 服务器 配置 服务 系统 es版本 10.100.12.144 16G 8core 500G磁盘 node.master/node.data CentOS 7.4 es7.5 10.100.12.145 16G 8core 500G磁盘 node.master/node.data CentOS 7.4 es7.5 10.100.12.146 16G 8core 50...

kibana安装非常简单，rpm安装就好了 $ wget https://artifacts.elastic.co/downloads/kibana/kibana-7.5.0-x86_64.rpm $ yum localinstall -y kibana-7.5.0-x86_64.rpm kibana 配置文件 $ egrep -v ^#|^$ /etc/kibana/kibana.yml server.port: 5601 server.h...

目前elk所用到的架构： filebeat--kafka--logstash--es--kibana 其中之前的章节已经写过es集群和kibana部署的过程了。 kafka集群搭建请参考我的另一篇文章 kafka_2.12集群搭建 logstash 配置过程： 下载logstash rpm包 $ wget https://artifacts.elastic.co/...

原理篇请查看https://blog.csdn.net/xiaokangtongxue410/article/details/82838872 这里我就不copy了 部署、配置过程： 安装略。。。 配置目录放在：/etc/filebeat $ cd /etc/filebeat $ ll -rw-r--r-- 1 root root 938 Oct 14 10:46 filebeat-htjfweb.yml dr...

版本号:7.3.1 1.需要在配置文件中开启x-pack验证, 修改config目录下面的elasticsearch.yml文件，在里面添加如下内容,并重启. xpack.security.enabled: truexpack.license.self_generated.type: basicxpack.security.transport.ssl.enabled: true 2，执行设置...

logstash安装 下载路径: https://www.elastic.co/downloads/logstash（安装方法参考官网安装步骤） 要读取nginx日志，配置nginx日志格式 vim nginx.conf 修改nginx记录日志格式，从http模块下 log_format main $remote_addr | $time_local | $request | $uri...

安装filebeat6.2 $ cd /usr/local/src $ wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.2.1-linux-x86_64.tar.gz $ tar xf filebeat-6.2.1-linux-x86_64.tar.gz $ cd filebeat-6.2.1-linux-x86_64 $ cp -r filebeat /usr/local/bi...

ELK6.5.4+filebeat+kafka实时日志分析平台部署搭建详细实现过程 1、ELK平台介绍 在搜索ELK资料的时候，发现这篇文章比较好，于是摘抄一小段： 日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置...

java服务日志框架使用的是logback，filebeat只fetch级别为WARN和ERROR的记录. ### Filebeat 一个轻量级开源日志文件数据搜集器，Filebeat 读取文件内容，发送到 Logstash 进行解析后进入 Elasticsearch，或直接发送到 Elasticsearch 进行集中式存储和分析。...

1．环境准备 a) 启动四台linux虚拟机 b) 安装JDK1.8 2. 下载并安装ES(x.x.x.130) 下载地址： curl -L -O https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.5.2.tar.gz 安装ES： tar -xvf elasticsearch-6.5.2.tar.gz 配置ES： cd elast...

生产环境ELK日志系统部署搭建指南 一、 搭建背景 1、 分布式系统，日志分散在多台机器，查询日志需要拿到全部日志进行逐一筛选，比较耗时。 2、 一些日志相关的紧急统计，需要临时耗费大量人力做分析汇总。 二、 环境准备 本次搭建环境及软件版本如下： 3台...