Заподозрили, что мужчина мне изменяет. Что делать?

Отношения свежие, и я только начала понимать, что появилась эмоциональная привязанность к человеку и тут уже вторую неделю чувствую и некоторые моменты подогревают эти мои предчувствия, что у него игра на 2 фронта идёт.
Он очень зависим от интима и раньше мы виделись примерно каждые 3-4 дня за этим делом(простите за подробности). Раньше звонил через день, через два и проявлял ревность и явную заинтересованность в том где я и с кем я. Сейчас все резко изменилось. Может вообще не звонить и не интересоваться мной по 2 дня, потом вдруг вспылёт, и то либо на кофе просится(а я не могу его домой пускать, тут родители) или на полчасика к нему зовёт и оба этих раза я ему отказала, первы́й раз понятно почему, а второй раз мне не понравился его тон, слишком пошлый и вызывающий. После этих 2х отказов, один день он позвонил и мы встретились на улице поьолтали, он сказал что хочет меня увидеть, но конкретного предложения где и как не поступило и не поступало в течении дня. И вчера вообще не звонил и в городе я его не видела, а когла вечером пошла прогулять дочь, то по пути встретился мне его брат старший и начальник по совместительству и сказал «не знаешь где мой брат?» я ответила, что понятия не имею, и раз он спросил, значит он тоже не в курсе где он. Меня очень это озадачило! Я по денски раздула, что он с другой значит был. Решила сегодня спросит у него при встрече, мол ты вчера работал? И если он скажет что работал, значит врёт точно. И он сказал, что работал!!! Но я и на этот раз не стала выяснять ничего, а просто ухмыльнулась и пошла мимо. И ещё был момент один, когда мы с ним были вместе, ему позвонили и он сделал такое лицо, типа «упс!» и убежал говорить по телефону в другую комнату и пришёл взволнованный и растерянный. По мне так есть причины везкие волноваться. Но мой вопрос в том, что делать?( Я эмоционально уже зависима о него и конечно было бы проще ничего не выяснять и бросить его, но не могу я пока этого сделать!( Но и оставаться с изменником я не хочу! Противно аж!( Выяснять отношения пока не знаю даже с чего начать и стоит ли? Нужно ли сейчас на основании этих фактов с ним говорить или лучше дождаться более везкого повода? Выждать момент и с более серьёзным фактом уже уйти? Вообще мучаюсь я, так и знала что будет на душе тяжело(((