Лучше уйти или остаться и менять что-то?

Здраствуйте!
Я попала в ситуацию из которой не вижу выхода и это меня очень угнетает.
3 месяца назад так сложились обстоятельства, что я провела ночь со своим администратором на работе. Ему 35 лет, он на 15 лет меня старше. Был женат. Уже 8лет не в браке, есть сын. С тех пор у нас завязались так называемые отношения. Мы не встречаемся, не ходим на свидания и т.д. Он снимает квартиру, я живу у него. Ночи мы проводим вместе.
Сначала мне показалось, что может быть продолжение, что он просто боится отношений. Что пройдёт время и он станет полноценно относится ко мне, как к своей девушке.
Но когда я спросила у него, что он думает по поводу отношений и т.п., он сказал, что его всё устраивает. Если меня не устраивает - я могу уходить. А также, чтобы я не ждала продолжения, что он ненавидит женщин вообще и все они одинаковы.
После этого разговора я задумалась, так ли я хочу быть с ним. Или он просто первый мужчина, который увидел во мне женщину?
Как мне найти силы уйти? Или может стоит остаться и поработать над исправлением ситуации?