Embora seja difícil uma mulher ser mais alta que eu, eu não me sentiria desconfortável

não. Apesar de parecer estranho, se eu gostar dela, isso não será um problema.