ждать или уйти? как быть, помогите советом!

Мы работаем в одной компании, но в разных отделах. Он пришел к нам полтора года назад. Я ему сразу понравилась, когда я приходила к ним в отдел, он на меня смотрел и улыбался, но мы не особо общались, по работе мы не сильно соприкасаемся. В итоге после 4 месяцев его прихода к нам, нам с ним поручили организовать спортивное мероприятие. На этой почве мы сдружились, стали общаться, потом он взял мой номер, живем мы в одном районе и он мне периодически звонил и мы гуляли, продолжалось это 3 месяцев, потом был первый поцелуй, через месяц секс. И вот уже год мы так общаемся. Звонит он мне сам, мы гуляем, нам интересно вместе. Я познакомилась с его сестрой, он живет с ней. Бываю у них в гостях, иногда остаюсь ночевать. Но мы не встречаемся. Он говорит, что боится. Он год назад развелся с женой, есть ребенок и только сейчас он стал понемногу отходить от развода. Он очень любил жену, но семейная жизнь не сложилась. Жена его постоянно давила, устраивала скандалы и истерики. И теперь он говорит, что боится отношений, боится, что я буду давить его, не давать ему ходить в спорт зал, ставить ультиматумы и т.д. боится повторения семейной жизни. Говорит, что ему нравится как у нас всё происходит, хотя и понимает, что так не должно быть и что должно же чем-то это закончится. Нам очень хорошо вместе, но его страхи и сомнения не дают нашим отношения к чему-то прийти. Я на него не давлю, ничего от него не требую и ни в чем не ограничиваю. Он это видит и ему не верится, что так может быть, что рядом может быть женщина, с которой тебе может быть легко. Он ждет подвох. Сказал, что ему нужно время. Я его очень люблю и хочу, чтобы он был счастлив, понимаю, что ему не просто, но мне то, что делать. Ему нужно время, но сколько? я не могу жить в неизвестности, мне надо знать, что этот человек у меня есть. Посоветуйте как быть мне в такой ситуации, терпеливо ждать и общаться или уйти и забыть. Да, по знаку зодиака он дева, я читала, что они все такие, им надо долго думать, анализировать.