Парень упрекает прошлыми отношениями

У парня до меня не было отношений, у меня до него было два парня, с обоими расстались в периоде начала отношений до интимной близости (то есть до настоящего парня я была девственницей как и он). Проблема в том, что он был влюблен в меня два года, но мы не были вместе, и с одним из двух «бывших» я начала встречаться за 3 месяца до того, как у нас с ним закрутилось. Повстречались 1 месяц. Об этом я ему рассказала на 4-ом месяце уже наших отношений. Упрекает именно в том, что я его не замечала, выбрала строить будущее с другим человеком, когда он все это время был рядом. Что я солгала ему, что не рассказала сначала о нем (а я просто и не знала зачем (да и в начале отношений, наверняка бы расстались, он большой собственник), ничего серьезного не случилось, никакогоотношения к нам этот бывший не имеет, живет далеко, никогда не встретимся) Говорит, что предала его, что он чувствует себя «отстающим», жалеет, что сам не встречался и даже что не имел секса с другими до меня. Бросает периодически и снова возвращается на следующий день. Я пытаюсь все это время поддержать и объяснить, что чувств к бывшему никаких, что только его упреки и напоминают мне о нем, что с рашими чувствами и отношениями (очевидно!) этот опыт с бывшим вообще и близко не сравнится что жалею что общалась с ним и рассматривала как возможного партнера и тд и тп. Говорила что если тебя это тревожит и не устраивает, мы можем расстаться (хотя я этого не хочу, сильно люблю его), но он не хочет, говорит что любит, возвращается, счастливые пару дней / недель, и потом опять по новой. Я предатель, изменщица и вообще жизнь ему сломала

Мы хотим сохранить отношения но вроде уже исчерпали все методы и средства.
Может кто-то переживал через подобное, может подсказать, что делать ?
как мне, так и ему, конечно же в возникающих проблемах виноваты оба, я и так взяла всю вину на себя уже, просто не понимаю, как её загладить и возможно ли, нельзя ведь отменить прошлое ?