Devo ou não ir na casa dele?

Preciso de uma ajuda ou opinião. Conheci um cara na faculdade, começamos a conversar, ficamos uma vez na faculdade e mês passado ele veio na minha cidade para me ver(moramos em cidades vizinhas). Depois disso, só estamos conversando pelo wpp, gostei muito de ter ficado com ele, pois ele faz meu tipo. Faz uns dias que ele está me chamando para ir na casa dele e hoje ele me chamou de novo. Não vou ser hipocrita de falar que não quero, pq eu quero passar um tempo a sós com ele, porém estou com um pouquinho de medo de acontecer e depois ele desaparecer, pq estou cansada disso, quando fico com um cara, rola tudo e depois a gente perde o contato. Só queria uma opinião pra saber se seria uma boa mesmo ir ou deixar quieto.