如何解决如何自动清除Spark Kafka检查点的检查点文件？
我有一个长期的spark结构流工作，可以读取有关Kafka主题的数据。我正在使用s3作为kafka检查点存储。它运作良好。但是，我看到在s3存储桶中为偏移量和提交信息创建了很多文件。是否有一些保留配置，可以自动清除旧的检查点文件？还是我需要手动清理文件。谢谢！
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。
