0x01.前言
看到小编鼓励作者写连载,趁着截稿日期延长并且还有Apple Watch
大奖的诱惑就又有动力再肝一篇出来了 2333……
0x02.再看日志检索
想要检索自然需要提前知道都有哪些字段,这里针对所有的键依次进行说明
No. |
字段名称 |
字段含义 |
---|---|---|
1 |
remote_addr |
客户端 IP 地址 |
2 |
remote_user |
客户端名称 |
3 |
time_local |
服务器本地时间 |
4 |
request_method |
HTTP 请求方法 |
5 |
request_url |
URL 地址 |
6 |
status |
HTTP 请求状态码 |
7 |
body_bytes_sent |
发送给客户端的字节数 |
8 |
http_referer |
|
9 |
http_user_agent |
客户端浏览器信息 |
10 |
http_x_forwarded_for |
当前端有代理服务器时,追踪记录客户端真实 IP 地址的配置 |
11 |
LogParseFailure |
解析失败日志的键 |
了解完全部字段后废话不多说,接下来直接去控制台进行操作
1,键值检索
举个例子,指定客户端地址
remote_addr : "101.89.43.238"
同理的用法均可用于其他字段
remote_user : "-"
time_local : "22/May/2021:20:41:56"
request_method : "GET"
request_uri : "/"
status : 200
body_bytes_sent : 348
http_referer : "-"
http_user_agent : "DNSPod-Monitor/2.0"
http_x_forwarded_for : "-"
2,键值大小搜索
举个例子,状态码大于 400
status :>400
相似的操作符还有
:> 大于某个数值
:< 小于某个数值
:>= 大于等于某个数值
:<= 小于等于某个数值
3,键值范围搜索
举个例子,检索4XX
状态码的日志
status:[400 TO 500}
4,键值模糊搜索
举个例子,检索UA
中含有baidu
的日志
http_user_agent : *baidu*
5,etc...
还有很多就不一一介绍了,同时上述操作符还可以叠加使用
举个例子,GET
请求并且状态码大于400
request_method:GET AND status:>400
0x03.再看日志分析
分析语句由检索条件和 sql 语句组成,两者通过竖线(|)分割
[检索条件] | [sql 语句]
摘自文档中最简单的两个示例
无检索条件,计算访问次数 PV 值
* | select count(*) as pv
文档中还有更多的示例,Nginx 访问日志分析案例
带宽曲线图
* | select HISTOGRAM(CAST(msec*1000 AS TIMESTAMP), INTERVAL 1 MINUTE) AS dt, round(SUM(body_bytes_sent)*8/1000.0, 2) AS "带宽(Kb/min)" group by dt order by dt limit 50
0x04.后记
可见不论检索还是分析都非常强大,可以说满足99%
的查询需求了
不管是能想到的还是想不到的查询语句它都能提供,这也是底层Lucene
所带来的魅力之一了
原文地址:https://cloud.tencent.com/developer/article/1827696
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。