Se eu apontar uma lanterna para o céu e liga-la, o que acontece com a luz? Ela se propagará para o espaço e gradativamente desviará para o vermelho até virar microondas e ondas de rádio de baixa frequência?

Sim, exatamente. Você pode até calculara a que distância a frequência se transformará em micro-ondas. Vou passar um artigo que ensina a fazer esse cálculo:
https://dournac.org/info/size_universe