-
刚入门 flink ,目前测试了单机部署,发现集群重启后,提交的任务都丢失了,想要恢复任务的话,需要手动指定 savepoint ,请问大佬们,flink 任务能持久化么,如果集群意外重启了,能否自动从 checkpoint 恢复任务呢。
-
是不是 flink 本身不支持这种功能,需要靠三方软件来实现呢
刚入门 flink ,目前测试了单机部署,发现集群重启后,提交的任务都丢失了,想要恢复任务的话,需要手动指定 savepoint ,请问大佬们,flink 任务能持久化么,如果集群意外重启了,能否自动从 checkpoint 恢复任务呢。
是不是 flink 本身不支持这种功能,需要靠三方软件来实现呢
|
suittsJan 17, 2025
1
集群挂了没法自动恢复 job
|
|
F281M6Dh8DXpD1g2Jan 17, 2025
2
用 resource provider (k8s /yarn )都行,再加上 jobmanager ha,基本能扛住节点意外重启的问题
集群挂了老天爷来了也没用 |
|
jyq711Jan 18, 2025
3
蹲一个大佬
|
|
4
@smartruid 只能一个个的手动恢复吗
![]() |
|
5
@liprais 主要是公司服务器经常搞迁移,但是不怕挂,停机迁移,很难受
|