Meiner Meinung nach solltest du schluss machen. Er tut dir nicht gut. Warum? Du hast dein Selbstwertgefühl verloren. Du bist dir nicht sicher was er tut und, zumindest klingt es so, willst du das gar nicht (offene Beziehung). Er gibt dir nicht das was du brauchst.
Es gibt da draußen noch so viele andere Jungs die dich deutlich besser behandeln würden. Auch wenn es weh tut und sich im ersten Moment nicht richtig anfühlt: Ich würde an deiner Stelle Schluss machen.