Em uma relação casual, só se pode falar sobre sexo?

Tipo se o cara quiser puxar outros assuntos devo cortar? Ou tudo bem eu ser legal deixando sempre claro que não quero nada sério com ele?