Flink-1.13 on Yarn Kerberos HDFS Delegation Token 7天失效问题。
我用的Flink-1.13,任务以PerJobCluster模式跑在Yarn上,Yarn使用kerberos做认证,现在任务跑7天Delegation Token过期不能做checkpoint。
conf/flink-conf.yaml
中也添加了配置:
security.kerberos.login.keytab: /home/hadoop/xxxx.keytab
security.kerberos.login.principal: xxxx
提交任务可以看到日志:
Login successful for user xxxx using keytab file /home/hadoop/xxxx.keytab
Adding keytab /home/hadoop/xxxx.keytab to the AM container local resource bucket
Adding delegation token to the AM container.
Created token for xxxx: HDFS_DELEGATION_TOKEN owner=xxxx@HADOOP.COM, renewer=hadoop, realUser=, issueDate=1628216155204, maxDate=1628820955204, sequenceNumber=3671882, masterKeyId=758 on ha-hdfs:hdp310001
报错内容:
RemoteException: token (token for xxxx: HDFS_DELEGATION_TOKEN owner=xxxx@HADOOP.COM, renewer=hadoop, realUser=, issueDate=1627557610943, maxDate=1628162410943, sequenceNumber=3564947, masterKeyId=750) can't be found in cache
请问大神们怎么解决。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论