Algoritmos não funcionam de forma isolada. Esse é um dos fatores, mas não o único.
Lá

vão ter pessoas que visitaram seu perfil, pessoas que vc interagiu, pessoas que vc visitou o perfil, pessoas com gostos em comum, pessoas com amigos em comum...