Olha, a questão não é a cor, mas sim de organição.
Tom rosa é um tom delicado, faz alusão a flor rosa. Ou seja, pode sim caracterizar como uma cor cor feminina. E o azul é apenas um conceito criado.
Porém, isso não significa que um homem usar uma camisa rosa seja bicha, assim como uma mulher usar uma camisa azul seja sapata. Tendeu? Mas essa separação eu acho importante, mistura d+ e depois ngm mais sabe quem é quem.