Depende. A única certeza, como você mesmo disse a sinalização de insegurança, desconfiança.

Porém isso não deveria em tese se sobrepor a individualidade da outra pessoa a sua privacidade.
Isso vai depender do contexto da relação desse casal ou seja: permitir ou não vai muito tipo de acordo que eles têm.
Não permitir algo só pq o outro quer, não é sinônimo de culpabilidade.