Acredito que seja ambos. Há uma tendência inata vinda desde o útero (Ex: alguma mudança

na ação da testosterona no cérebro) e há também estímulos emocionais/afetivos ("imprinting") durante a formação da sexualidade, que é algo que só se completa totalmente na puberdade.

Acredito que alguns vêm com a tendência inata forte e não há estímulo contrário que mude. Outros vêm em situação "em cima do muro" e os estímulos ("imprinting") durante a criação e maturação sexual direcionam sua orientação para um dos lados, ou se tornam bissexuais.

Li isso em um livro de biologia evolutiva.