微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

大数据_Flink_Java版_状态管理(4)_状态后端---Flink工作笔记0065

然后我们再来看这个,状态后端,这个是个可插入的组件,他主要是用来管理状态的,比如,对状态的维护,还需要有对状态的容错对吧,所以,首先为了保存状态,都是把状态保存到内存中的,但是为了

容错防止,机器down掉,会丢失状态还需要把状态在硬盘中存储一份.

这些复杂的状态管理,在分布式下如果我们自己实现就非常复杂,但是flink给我们提供了这个状态

管理组件,叫做state backend 状态后端.

可以看到,状态后端主要负责,本地状态管理,以及将检查点checkpoint状态写入远程存储起来.

然后我们再来看一下状态后端组件,都是有哪些.

1.首先看这个MemoryStateBackend,这个是内存级的状态后端组件,这个会将键控状态作为内存对象管理,把键控状态放到taskmanager的jvm堆上,将checkpoint,放到jobmanager的内存中,特点是快,

但是光放到内存中,安全性不好,一般生产环境都不用这个.如果机器坏了容易丢失状态.

2.然后FsstateBac

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐