weißt Du von wie vielen Männern ich schon geträumt habe, mit denen ich nie was hatte und nie was haben wollte? Eine Unterstellung deswegen - ruhig oder nicht - würde ich auch nicht gerade als Kompliment verstehen.
Und darauf reagiert nun einmal jeder anders. Ich für meinen Teil bin auch kein Mensch, der sich bei ungerechtfertigten Unterstellungen noch rechtfertigen und einen auf Schönwetter machen würde. Das (also die Unterstellung) ist verletzend (und "gemein") und genauso reagiere ich da auch.
Dazu kommt: Auch wenn Du es ruhig gesagt hast - wenn Ihr Euch deswegen gerade erst gestritten habt, kannst Du es so ruhig sagen, wie Du willst, es wird dennoch als Fortsetzung des Streites ankommen.
Generell kann aber bei einem Streit in der Beziehung nie immer nur einer derjenige sein, der "nachgibt" - doch das ist kein Problem des aktuellen Streites sondern ein grundsätzliches.