У мужчины детские травмы

Добрый вечер. Нахожусь в отношениях с мужчиной, который плохо относится к женщинам с недоверия из за прошлого: сам из детского дома, приемные родители никогда не любили. Во взрослой жизни был в браке, где первая супруга изменила ему, сделала аборт. Подскажите, как можно построить с данным человеком? Сам говорит,что я очень хорошая и боится ранить своим отношением. Часто на работе любит побыть, а если дома,то всегда молчит. Когда спрашиваю ,отвечает,что если я рядом это уже показатель того,что ему не безразлична,но я понимаю,что его детские травмы не отпускают. При ссорах манипулирует,что я его брошу раз он такой плохой. Подскажите, возможно ли изменить мировоззрение у человека? Или же человеку и одному будет хорошо без меня