natürlich kann es das....

... das ändert aber nicht, dass du so fühlst.

Die Erklärung hört sich seltsam an. Sag ihm ganz klar, dass du das schon ziemlich konstruiert auf dich wirkt.
Rede vor allem über deine Eifersucht, und dass du nicht recht damit umgehen kannst. Bitte ihn, dir zu helfen, damit du dich sicherer fühlst.
Er sollte zukünftig solche Dinge vorher erzählen, damit kein bitterer Beigeschmack aufkommen kann.

Es wird dir vorerst nichts anderes übrigbleiben, als die Erklärung so hinzunehmen.
Du musst nun an dir arbeiten. Es liegt in deiner Hand dir den Tag, mit der Vorstellung er könne fremdgehen, zur Hölle zu machen.
Aber was würde es ändern? Du würdest sowieso aus allen Wolken fallen wenn etwas vorfallen würde. Also warum dir vorher die Zeit vermiesen?
Lerne Vertrauen zu fassen und glaube seine Liebe. Er wäre doch blöd, das ganze aufs Spiel zu setzen, oder?

Stell dir vor, du machst dich dein Leben lang verrückt, und er geht dann gar nicht fremd? ;-)