Родительские права и обязанности

Всем - здравствуйте!
Тема наболевшая, поэтому попрошу тех, кому откликается, ответить мне подробнее. Год назад, когда дочке было 9 месяцев, ушла из дома мужа, где проживали с ним и свекоброй. Иначе её назвать язык не поворачивается. Они вдвоём с бывшим мужем не давали жить (писала на форуме). Я не могла сходить к врачу, в итоге всё-таки загремела на операционный стол с выпадениями и нагноениями вскоре после того как сбежали с деткой из этого адошника. Дочка нервничала, после переезда стала гораздо спокойнее.
В общем, сейчас мы разведены.
Бм платит алименты, мы с дочкой живём на них и на то, что я зарабатываю в её сны. Очень жду детсад на полный день, потому что никакая няня не может гарантировать мне, что не заболеет и я не останусь дома с ребёнком и объемом полного рабочего дня.
И бм задался целью получить от меня лишение его род.прав. Деньги идут официально, но приезжать к дочке он не хочет. Например, если договориться с ним, что он приедет, а я пойду к врачу, то за 5 минут до назначенного времени приходит сообщение "чёта я устал не приеду".
Вопрос: можно ли как-то официально регламентировать его приезды или стоит сжать зубы и терпеть такое отношение?