Não, porque agredir é uma escolha. Não existe uma propriedade "homem agressor de mulher". Existe uma ação: homem agrediu mulher.
Agora, há pessoas que acham normal agredir as outras, acham justificável agredir, logo essas provavelmente vão escolher agredir caso achem que a situação é propícia para uma agressão. O que você pode fazer é conhecer a pessoa e tentar ver como ela encara o fato de agredir outra pessoa.