Vocês acham que é errado ficar a primeira vez casualmente?

Eu conheci um cara e saímos 5 vezes e sempre conversamos já faz um ano. Ele tem problemas de baixa autoestima, entre outros problemas emocionais. Nos damos bem. Ele não quer relacionamento sério. Sou virgem e tenho vontade de ficar com ele. Mas um monte de tabus povoam a minha mente.