Не хочу спать с мужем

Ситуация такая. Двое детей. Почти 5 лет и почти 2 года.
когда был один ребёнок, жили в однушке, спали с мужем вместе, ребёнок в поставной кровати. С рождением младшего ребёнка сплю в детьми в детской, приобрели квартиру побольше.
не кормлю младшего ребёнка почти пять месяцев, но сплю также с ними. Муж каждый день твердить, что хочет спать с женой, не для того он квартиру новую покупал и делал ремонт под нас, чтобы я всю жизнь в детской провела.
я это понимаю, но ничего не делаю чтобы исправить ситуацию. За пять лет декрета я так сильно хочу высыпаться, что мне комфортнее спать с детьми нежели с мужем. Он ночью ворочается, ходит в туалет, обнимает, храпит. Все это мне мешает спать. Я просто хочу спать одна, вообще без детей и без мужа. Хочу уснуть вечером и проснуться утром, а не по несколько раз за ночь. Это ему высказать не могу, боюсь обидеть, он итак думает что я не сплю с ним потому что он мне не нужен.
секс регулярный, качественный. Почти каждый день. Но ему этого мало, хочется засыпать и просыпаться вместе. А мне просто хочется покоя и чтобы меня никто не трогал.
как быть ? (( может у кого-то похожая ситуация