É errado/imoral ir em um templo Budista para participar das meditações, para ouvir/estudar sobre os conceitos morais do budismo, etc, mesmo sem ser budista? Mesmo sem acreditar em karma, sansara, etc?‎

Claro que não. Pode-se ir a qualquer templo de qualquer religião, a não ser que a religião o impeça. Isso não é errado, se a permanência lá for respeitosa com relação aos demais presentes que pertençam à religião do templo, mesmo que não se seja membro dela.