Como posso saber quando/se/por que um contêiner em um cluster kubernetes é reiniciado?

Você pode visualizar os logs da última reinicialização de um contêiner usando:

kubectl logs nome do pod -c nome do contêiner --anterior

Conforme descrito por Sreekanth, kubectl get pods deve mostrar o número de reinicializações, mas você também pode executar

kubectl descreve pod nome do pod

E mostrará os eventos enviados pelo kubelet ao apiserver sobre os eventos de ciclo de vida do pod.

Você também pode escrever uma mensagem final em /dev/termination-log, e isso aparecerá conforme descrito na documentação .

Além das respostas anteriores, outro comando que me ajudou a encontrar um erro é:

kubectl get event [--namespace=my-namespace]

Ele lista eventos de Pods, Jobs, Nodes também

Eu sigo estas etapas para definir o motivo da falha:

# print out a pod logs (https://kubernetes.io/docs/reference/generated/kubectl/kubectl-commands#logs)
kubectl logs {name_of_pod} -n {namespace} --since=2h --timestamps


# print the logs for the _previous_ instance of the container in a pod if it exists
kubectl logs -p {name_of_pod} -n {namespace} --since=2h --timestamps


# check events (https://kubernetes.io/docs/reference/generated/kubectl/kubectl-commands#describe)
kubectl describe pod {pod_name} -n {namespace}

# look at the 'Events' at the end of the output
# ..
# Events:
#   Type     Reason   Age                 From               Message
#   ----     ------   ----                ----               -------
#   Warning  BackOff  40m                 kubelet, gke-xx    Back-off restarting failed container
# ..


# observe all events (https://kubernetes.io/docs/reference/generated/kubectl/kubectl-commands#get)
kubectl get events -n {namespace} --sort-by=.metadata.creationTimestamp


# check logs, etc. in pod container (https://kubernetes.io/docs/reference/generated/kubectl/kubectl-commands#exec)
kubectl exec -it {pod_name} -n {namespace} -- sh

kubectl get pods listará todas as reinicializações do contêiner e o comando describe pode ser útil porque lista todos os eventos associados ao pod.

Sondas de vivacidade e de prontidão podem ser configuradas para melhor manuseio, verifique aqui

https://kubernetes.io/docs/tasks/configure-pod-container/configure-liveness-readiness-startup-probes/

Além disso, os ganchos podem ser configurados para serem consumidos no contêiner em pontos específicos do ciclo de vida do contêiner, verifique aqui

https://kubernetes.io/docs/concepts/containers/container-lifecycle-hooks/

Quando reiniciado

kubectl describe pod your-pod-name

Procure uma seção como esta:

State:          Running
  Started:      Wed, 23 Jun 2021 23:52:05 +1000
Last State:     Terminated
  Reason:       Error
  Exit Code:    1
  Started:      Wed, 23 Jun 2021 23:46:48 +1000
  Finished:     Wed, 23 Jun 2021 23:46:52 +1000
Ready:          True 

A interpretação acima é a seguinte:

• O pod foi encerrado Wed, 23 Jun 2021 23:46:52 +1000após ter iniciado em Wed, 23 Jun 2021 23:46:48 +1000, e agora está em execução e pronto, tendo sido iniciado pela última vez emWed, 23 Jun 2021 23:52:05 +1000

Uma solicitação pull agora foi mesclada no marco kubernetes 1.22, para adicionar LAST RESTARTcoluna a kubectl get pods, e estará disponível assim que for lançada - veja aqui. https://github.com/kubernetes/kubernetes/pull/100142

Para ver sua versão atual -kubernetes version

(1.21 é o último lançamento em 28 de junho de 2021)

Se reiniciado

kubectl get po [your-pod-name] O pod foi reiniciado em algum estágio se houver algum número na RESTARTScoluna

Por que reiniciou

kubectl describe pod [your-pod-name]mostrará um Last Stateque lhe dá uma indicação de alto nível. Para ver o que aconteceu no pod antes de reiniciar, use kubectl logs your-pod-name --previous. Você pode canalizar isso para um arquivo para inspeção, por exemplo

kubectl logs your-pod-name --previous > pod_previous_log.txt

(Veja também acima em 'Quando reiniciado')