Acho que não é tão comum esse preconceito não. Vejo muito mais ao contrário, com

mães solteiras.
Se você se envolver com uma mulher mais madura, com certeza ela vai achar isso uma ótima qualidade, pq é muito raro!
A única coisa que realmente pode pesar, é o fato de estar sempre com a criança, então isso pode tirar um pouco a privacidade de vocês, ela ter que de repente lidar com a ex. Mas aí não seria preconceito.