Só conheço por amante o homem ou mulher que saiam
com alguém casado/ relação estável.
Aos outros

conheço por caso, cacho, affair, termos que também
se aplicam a pessoas que saem com casados e similares.