Я не знаю как быть???

Девочки, помогите советом.
Я в декрете за вторым ребенком. Первый в школу ходит (1-й класс).
Проблема вот в чем. Мой муж меня постоянно упрекает за все, я его раздражаю. То не так посмотрела, та не таким тоном сказала. Бывает что я ему что-то рассказываю он вроде бы меня слушает, но потом через время говорит что я такого ему не говорила. Сам же может мне сказать что я тебе говорил, а ты проигнорировала мою просьбу. Хотя на самом деле он ничего не говорил.
Я очень устала от таких отношений. Дома он мне не помогает, с детьми тоже я постоянно сама вожусь. Как выходные то с утра пораньше надо обязательно куда-то ехать, а то ему дома скучно. И еще я должна придумать куда и чтобы ему понравилось.
Сказать ему ничего нельзя против, замечание сделать тем более. Нарвешься на такой скандал, что мало не покажется.
Уйти не могу, некуда да и материально от него завишу.
А вчера пришла моя мама в гости, он на меня в очередной раз ругался. Она сделала ему замечание. Так он мне сегодня сказал, чтобы больше ее в его доме не было иначе я пойду к ней жить.
Что делать не знаю. Я очень устала так жить. И детей жалко, они же все видят и понимают.