Depende. Se você não sentiu atração em momento algum, não seria transfobia. Agora se sentiu

atração, gostou da pessoa e se recusou apenas por ela ser uma mulher trans, já seria transfobia.