微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

4,Logstash的安装和简易使用

						Logstash的安装和简易使用
Logstash功能
	Logstash主要对日志进行过滤处理,也能用来做日志收集。但日志采集一般不用logstash
	输入支持: 标准输入、文本日志输入等
	输出支持: 标准输出输出到es等

Logstash的安装
	yum install java-1.8.0-openjdk java-1.8.0-openjdk-devel -y
	yum localinstall logstash-7.6.2.rpm

Logstash的JVM配置文件更新jvm.options 
	-xms200M
	-Xmx200M

Logstash最简单配置/etc/logstash/conf.d/logstash.conf
	input{
		stdin{}
	}
	output{
		stdout{
			codec=>rubydebug
		}
	}

Logstash的启动和测试
	/usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/logstash.conf
	输入字符,查看输出



							Logstash读日志文件
安装Nginx来提供日志输入
	yum install Nginx -y

编辑Nginx的systemctl配置文件/usr/lib/systemd/system/Nginx.service,删除底下
	KillSignal=SIGQUIT
	TimeoutStopSec=5
	KillMode=process
	PrivateTmp=true

Logstash收集日志注意点
	认logstash用logstash用户启动,日志需要给logstash用户读权限chmod 755 /var/log/Nginx
	需要有新日志产生,刚启动老的日志认不读取

输入读取Nginx日志
	input {
		file {
			path => "/var/log/Nginx/access.log"
		}
	}
	output{
		stdout{
			codec=>rubydebug
		}
	}

Logstash的启动
	systemctl enable logstash
	systemctl restart logstash
	观察日志:/var/log/messages



							Logstash读取日志内容输出到ES
Logstash和ES结合说明
	Logstash支持读取日志发送到ES
	但Logstash用来收集日志比较重,后面将对这个进行优化

Logstash配置发送日志到ES数据库/etc/logstash/conf.d/logstash.conf
	input {
		file {
			path => "/var/log/Nginx/access.log"
		}
	}
	output {
		elasticsearch {
			hosts => ["http://xxx:9200", "http://xxx:9200"]
			user => "elastic"
			password => "sjgpwd"
			index => "sjgNginx-%{+YYYY.MM.dd}"
		}
	}

Logstash配置重载,重启Logstash慢
	kill -1 pid

数据查询
	Kibana上使用开发工具查询数据GET /xxx/_search?q=*
	Kibana上创建索引可直接网页查看日志

Kibana索引和es索引
	Kibana索引仅提供查询展示
	es索引是真正的数据

模拟Nginx日志产生
	while true;do 
		curl 127.0.0.1/sjgsjg
		curl 192.168.238.90/sjg666
		sleep 5
	done

 

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐