ポッドが終了する直前にログを S3 に転送しようとしています。このためには、
AWS-CLI を持つようにコンテナーを構成します。postStart フックのスクリプトを使用して、これを成功させました。
AWS S3 コマンドを実行して、hostPath から S3 バケットにファイルを転送します。ほとんどこれを持っていました!!!
これが私のKube展開です(minikubeで実行):
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
name: logtransfer-poc
spec:
replicas: 1
template:
metadata:
labels:
app: logs
spec:
volumes:
- name: secret-resources
secret:
secretName: local-secrets
- name: testdata
hostPath:
path: /data/testdata
containers:
- name: logtransfer-poc
image: someImage
ports:
- name: https-port
containerPort: 8443
command: ["/bin/bash","-c","--"]
args: ["while true; do sleep 30; done;"]
volumeMounts:
- name: secret-resources
mountPath: "/data/apache-tomcat/tomcat/resources"
- name: testdata
mountPath: "/data/testdata"
lifecycle:
postStart:
exec:
command: ["/bin/sh", "-c", "cd /data/testdata/ && chmod u+x installS3Script.sh && ./installS3Script.sh > postInstall.logs"]
preStop:
exec:
command: ["/bin/sh", "-c", "cd /data/testdata/ && chmod u+x transferFilesToS3.sh && ./transferFilesToS3.sh > postTransfer.logs"]
terminationMessagePath: /data/testdata/termination-log
terminationGracePeriodSeconds: 30
imagePullSecrets:
- name: my-docker-credentials
installS3Script.sh
#!/bin/bash
apt-get update
curl -O https://bootstrap.pypa.io/get-pip.py
python3 get-pip.py --user
chmod u+x get-pip.py
echo "PATH=$PATH:/root/.local/bin" >> ~/.bashrc && echo "Path Exported !!"
source ~/.bashrc && echo "Refreshed profile !"
pip3 install awscli --upgrade --user
mkdir -p ~/.aws
cp /data/testdata/config/config ~/.aws
cp /data/testdata/config/credentials ~/.aws
transferFilesToS3.sh
#!/bin/bash
# export AWS_DEFAULT_PROFILE=admin
echo "Transfering files to S3.."
aws s3 cp /data/testdata/data s3://testpratham --recursive --profile admin
aws s3 ls s3://testpratham --profile admin
echo "Transfer to S3 successfull !!"
何が失敗したか: transferFilesToS3.sh は正常に実行されますが、AWS コマンドは実行されません。
何が機能するか: テストログファイルを作成し、aws コマンドを postStart フック (installS3Script.sh) に配置すると、正常に動作します!!
preStop フックを別の方法で検討している可能性があると思います。ライフサイクルとpreStopフックに関する記事をいくつか読みました。また、猶予期間付きの preStop フックの使用に関する相対的な質問もありました。
私が見逃している可能性があるものについての提案/ヘルプをいただければ幸いです。