É porque você não está fazendo o exercício mental para entender que você é seu

próprio chefe, que é como funciona a vida adulta.

Você é o seu chefe para ir à academia.
Você não pode falar para o seu chefe no seu trabalho "não estou com vontade de ir hoje,ok?", pois seria demitido, então você também não pode falar para o seu chefe da academia (que é você mesmo adulto) que não pode ir. Sua opinião sobre ir ou não ir não faz diferença. Você só poderia faltar nas mesmas condições que faltaria o trabalho (estar doente, etc.).