É "errado" um ateu frequentar os encontros de uma determinada religião (seja cultos, missas, ou qualquer coisa do gênero), apenas por gostar da confraternização, das músicas, do contato com as outras pessoas, etc? Sem acreditar nas partes sobrenaturais, nem nada assim...‎

De modo nenhum. Como qualquer religioso de qualquer religião pode, perfeitamente, frequentar cultos de outras religiões por qualquer razão, como curiosidade, prazer estético, companhia de amigos ou o que for.