É verdade que não posso saber se o mesmo vermelho que você enxerga é o que eu enxergo também?‎

Certamente que não, pois a sensação e a percepção são subjetivas. Mas podemos concordar sobre o matiz e o tom de qualquer cor, especificando-o corretamente, de modo que ao me descrever um tom e matiz, eu aponto a cor e você concorda. Só que o que eu percebo não há como saber que é o que você percebe. O mesmo pode se dizer dos sons, odores e sabores, por exemplo.