Fisicamente seguro? Homens, por razões óbvias. Psicologicamente seguro? Homens também, tenho um certo "preconceito" de que mulheres estão sempre nos julgando, não sinto sinceridade vindo da maioria das mulheres.
Acho que é indiferente. Se há um risco de estar sozinho com uma pessoa estranha num lugar escuro, por exemplo, creio que seria independente do gênero da pessoa.