Seria normal ele ficar distante enquanto está mexendo -entretendo-se - no celular.
Com certeza você

também fica quando está mexendo no seu.
Acredito que sinais de negligência com relacionamento ou desinteresse vão além disso, principalmente pra cônjuges, onde outros fatores tendem a ter mais relevância ou que podem influenciar, e são/tendem a ser perceptíveis.