彼「元カノのご飯を作りに行くことは続ける」私「そんな人とは同棲できない」彼「元カノときみへの信頼の差は歴然」私「は？」

まだそんなに時間が経ってないために引きずってる感じあるけど、気持ちの整理がてら吐き出させてもらう。

趣味を通じて知り合った彼。
知り合って半年ほどで、まだ付き合ってもなかったけどお互いいい感じで2人の将来のことも話すような仲だった。
遠距離なためほぼ毎日LINEで通話したり連絡マメにしてたんだけど、こっちの事情で2日くらい間が空いた。
その間に彼が元カノと同棲してた部屋に置き忘れた荷物を取りに行ってたらしく、元カノと久しぶりに会ったらしい。
別れ話もろくにせずに別れたという話だったけどその時は普通に話せたようで、今後も友達としてやっていけたらなんて話をしたそう。
んでここからがもう関係を絶とうと思った出来事？なんだけどその時の元カノが別れた時より随分やつれていたそうで(元カノは精神的な病気持ちで人が見張ってないとろくに食事も取らないそう)心配になった彼が
「ご飯作りに来るからちゃんと食べて」って言ったらしい。
それは私と付き合っても続けるつもり、それが俺なりのお世話になった元カノへの恩返し
って言ってて、ある程度のことには目をつむれる私でもすごくモヤモヤした。
なので正直に
「私と付き合っても続けるのはやめてほしい。いくらお世話になった人だとしてもそれはおかしい。友達の関係に戻ったとしても元カノは元カノ、体の関係を一度は持って好きになった人なんだからそういうことが起きない保証もない。そんな人とは同棲できない(付き合うとしたら私が彼の方へ移り住む予定だった)」的なことを言ったら
「数年一緒にいた元カノと半年しか経ってない私への信頼の差は歴然。やめてほしいならそれ相応の信頼と覚悟と気持ちを持って」と言われた。
頭にハテナがいっぱい浮かんだ。
そりゃあ信頼は元カノの方が上だろうけど、なんでそんな上から目線なんだ？？
先に私のことを好きになって同棲してほしいと言ったのはそっちでしょ？
家族も置いて遠く離れた土地へ移り住むのは相応の覚悟ではないの？

もう何が何だかわからなくなって、お幸せに、とだけ告げてLINEも全部ブロックした。
未練がないわけではないけど、この人とはやっていけない、不満が募るだけだと悟った。

以上です。
散文失礼しました。