A diferença é o consenso e o tipo de atitude que aconteceu.
Tem mulher que acha

que dar um "bom dia, linda!" é assédio, mas quando um homem bonito o faz realmente deixa de ser, justamente porque ela não tem muito claro o que é assédio, tanto que dependendo de quem vem, pode ser até mesmo uma cantada...
Pra mim assédio são situações e atitudes escrotas, por isso não muda nada se o cara que fez é feio ou bonito.