Depende da pessoa em questão, mas os dois casos acontecem.
Pessoalmente passo a sentir mais

atração quando conheço a pessoa melhor, não apenas achar a pessoa bonita ou atraente.