微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

linux – 对大文件的tac命令效率如何

taccommand(catreversed)可用于向后读取文件,就像cat从头开始读取它一样.我想知道,这是多么有效率.它是否必须从头开始读取整个文件,然后在到达结尾时反转一些内部缓冲区?

我计划将它用于一些经常调用的监视脚本,它需要检查文件的最后n行,其大小为几百兆字节.但是,我不希望这会导致繁重的I / O负载或通过一遍又一遍地读取文件(大约每分钟一次左右)来填充缓存空间以及其他无用的信息.

任何人都可以对该命令的效率有所了解吗?

解决方法

如果使用得当,tac的效率相当高,可以一次读取8K块,从后面寻找.

除其他外,“正确使用”要求对您的文件提供直接,可寻找的处理:

tac yourfile   # this works fine

…要么…

tac <yourfile  # this also works fine

# DON'T DO THIS:
# this forces tac to copy "yourfile" to a new temporary file,then uses its regular
# algorithm on that file.
cat yourfile | tac

也就是说,与使用logstash或可以提供给索引存储的类似工具和/或生成事件以进行CEP实时分析相比,我会考虑反复运行这种工具,这是一种非常低效的扫描日志的方法.引擎如EsperApache Flink.

原文地址:https://www.jb51.cc/linux/398971.html

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐