professor, mas por qual razão então o tempo se moveria para o futuro no caso do pêndulo e movimento de rotação da Terra que eu mencionei

Porque esses fenômenos não existem sozinhos no Universo. Eles ocorrem dentro do Universo e o Universo está indo para o futuro. A cada oscilação do pêndulo e a cada rotação da Terra, o Universo não é mais o mesmo.