ELKStack企業(yè)日志-創(chuàng)新互聯(lián)

一、ELK介紹

ELKStacks是一個(gè)技術(shù)棧的組合，分別是Elasticsearch、Logstash、Kibana

創(chuàng)新互聯(lián)是一家專業(yè)提供磐石企業(yè)網(wǎng)站建設(shè),專注與做網(wǎng)站、成都做網(wǎng)站、HTML5建站、小程序制作等業(yè)務(wù)。10年已為磐石眾多企業(yè)、政府機(jī)構(gòu)等服務(wù)。創(chuàng)新互聯(lián)專業(yè)的建站公司優(yōu)惠進(jìn)行中。

ELK Stack：

1、擴(kuò)展性：采用高擴(kuò)展性分布式架構(gòu)設(shè)計(jì)，可支持每日TB級數(shù)據(jù)

2、簡單易用：通過圖形頁面可對日志數(shù)據(jù)各種統(tǒng)計(jì)，可視化

3、查詢效率高：能做到秒級數(shù)據(jù)采集、處理和搜索

https://www.elastic.co/cn/products/elasticsearch

https://www.elastic.co/cn/products/kibana

https://www.elastic.co/cn/products/beats/filebeat

https://www.elastic.co/cn/products/beats/metricbeat

二、ELK架構(gòu)

Logstash ：開源的服務(wù)器端數(shù)據(jù)處理管道，能夠同時(shí)從多個(gè)來源采集數(shù)據(jù)、轉(zhuǎn)換數(shù)據(jù)，然后將數(shù)據(jù)存儲到數(shù)據(jù)庫中。

Elasticsearch：搜索、分析和存儲數(shù)據(jù)。

Kibana：數(shù)據(jù)可視化。

Beats ：輕量型采集器的平臺，從邊緣機(jī)器向 Logstash 和 Elasticsearch 發(fā)送數(shù)據(jù)。

Filebeat：輕量型日志采集器。

https://www.elastic.co/cn/

https://www.elastic.co/subscriptions

Input：輸入，輸出數(shù)據(jù)可以是Stdin、File、TCP、Redis、Syslog等。

Filter：過濾，將日志格式化。有豐富的過濾插件：Grok正則捕獲、Date時(shí)間處理、Json編解碼、Mutate數(shù)據(jù)修改等。

Output：輸出，輸出目標(biāo)可以是Stdout、File、TCP、Redis、ES等。

三、ElasticSearch

3.1 基本概念

Node：運(yùn)行單個(gè)ES實(shí)例的服務(wù)器

Cluster：一個(gè)或多個(gè)節(jié)點(diǎn)構(gòu)成集群

Index：索引是多個(gè)文檔的集合

Document：Index里每條記錄稱為Document，若干文檔構(gòu)建一個(gè)Index

Type：一個(gè)Index可以定義一種或多種類型，將Document邏輯分組

Field：ES存儲的最小單元

Shards：ES將Index分為若干份，每一份就是一個(gè)分片

Replicas：Index的一份或多份副本

ES	關(guān)系型數(shù)據(jù)庫（比如Mysql）
Index	Database
Type	Table
Document	Row
Field	Column

3.2 集群部署

首先做好系統(tǒng)的初始化配置，安裝好jdk

#1)?System?initialization?on?each?Servers
cat?>>?/etc/security/limits.conf?<<?EOF
*?hard?memlock?unlimited
*?soft?memlock?unlimited
*?-?nofile?65535
EOF

cat?>?/etc/sysctl.conf?<<?EOF
net.ipv6.conf.all.disable_ipv6?=?1
net.ipv6.conf.default.disable_ipv6?=?1
vm.swappiness?=?0
vm.max_map_count=262144
vm.dirty_ratio=10
vm.dirty_background_ratio=5
net.ipv4.tcp_fin_timeout?=?30
net.ipv4.tcp_keepalive_time?=?1200
net.ipv4.tcp_tw_reuse?=?1
net.ipv4.tcp_max_syn_backlog?=?8192
net.ipv4.tcp_max_tw_buckets?=?5000
net.ipv4.ip_local_port_range?=?10000?65000
EOF


sysctl?-p

setenforce?0
sed?-i?'s/^SELINUX=.*$/SELINUX=disabled/'?/etc/selinux/config
?
systemctl?stop?firewalld.service
systemctl?disable?firewalld.service
??
#2)?Install?JDK?on?each?Servers
wget?-c?http://download.cashalo.com/schema/auto_jdk.sh
source?auto_jdk.sh

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

文章標(biāo)題：ELKStack企業(yè)日志-創(chuàng)新互聯(lián)
鏈接地址：http://m.kartarina.com/article28/ccgsjp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供全網(wǎng)營銷推廣、建站公司、網(wǎng)站建設(shè)、品牌網(wǎng)站制作、商城網(wǎng)站、域名注冊

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)