僕個人もそう思いますし浮気なんてしたら自分のことを信じられなくなると思うからあり得ない派です。
ただ、心理学の話を持ってくるのなら人間は無意識に過去と同じパターンの恋愛をしたい力が強く働くとされているので(もちろんこの人とあの人は全然違うと付き合い初めはいくらでも思うのですが)…もしも、浮気されてばかりでという人がいるのなら…実はその人は浮気されそうな人を無意識に選んでいたり、浮気されるように無意識に相手を仕向けたりしてしまうそうです。浮気された人間も「ほら、やっぱり浮気した」と安心したくなるという心理も働いてしまいます。そういう人にとっては、ある意味その言葉も間違ってはいないのかな。と思います。