Eu acho que entendi onde você quer chegar com essa pergunta. Você pode sentir atração

tanto Romântica tanto como física pelas pessoas... às vezes elas andam juntas, outras não, pode depender de N fatores? Sim! E um deles pode ser o gênero, tranquilamente.
Se você é homem e tem interesse em outro homem isso te faz Gay, Bissexual ou Pansexual.
Vou me colocar como exemplo: sou mulher e sinto atração romântica e/ou física apenas por mulheres. Isso me torna uma mulher Lésbica.