общение детей с отцом - ?

Добрый день!
Ситуация такая: с мужем не живём вместе, состоим в официальном браке, но собираемся разводиться. Двое детей 4 и полтора года. Муж изъявляет желание забрать старшего ребёнка на выходные, я против. Не хочу оставлять ребёнка наедине с мужем, он его конечно не ударит, но доверия нет, т.к. не уверена, что окажет должный уход. Общаться в моём присутствии я не запрещаю, в любой день, но когда он приходит играть с детьми, сразу начинает цеплять меня, завожусь и ругаемся. Поэтому он стал требовать забрать сына с ночёвкой... Я могу отказать? И при разводе как-то можно отрегулировать общение? (что бы без ночёвок, хотя бы до более или менее взрослого возраста ребёнка). Заранее спасибо за ответы...