Hadoop でスパーク ストリーミング ジョブを実行しています。マシンは kerberized されており、42 時間正常に実行されましたが、HDFS トークン委任の有効期限が切れたために失敗しました。
8時間ごとに実行されるkinitコマンド用にcrontabをセットアップし、10時間のMax-renewライフタイムトークンを持っています。
エラーが原因で失敗しました: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.token.SecretManager$InvalidToken): トークン (HDFS_DELEGATION_TOKEN トークン)
また、開始中にコマンドラインで原則を使用してジョブを実行しています。