apache-spark - org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.token.SecretManager$InvalidToken)：令牌已过期

Question

我在火花流工作中遇到问题。这项工作将执行以下过程。- 读取流数据 - 将流数据与 Hive 表连接（底层数据存在于 HBase.

程序运行了 2-3 周，但随后失败并显示以下消息。

19/04/27 05:56:16 WARN security.UserGroupInformation: PriviledgedActionException as:ndc_common (auth:SIMPLE) cause:org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.token.SecretManager$InvalidToken): Token has expired
19/04/27 05:56:16 WARN ipc.RpcClientImpl: Exception encountered while connecting to the server : org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.token.SecretManager$InvalidToken): Token has expired

有人可以解释一下如何解决这个问题。虽然集群是kerborized。

谢谢

标签： apache-sparkspark-streaming