Как сохранить отношения с мужчиной «с прицепом»?

Закидайте меня тапками, но я уже не в том возрасте, когда за мной бежит толпа холостых мачо. Познакомилась с разведенным, развелся давно, есть дочь от первого брака. Сразу все было ничего, дочка периодически приходила, но ею занималась бабушка (мать моего друга). Так случилось, что бабушка скончалась. Это другая история. Но реальность сейчас такова, что за это мы привыкли друг к другу, сняли квартиру, живем вместе. Квартира однокомнатная. И стал вопрос, как де дочка будет навещать своего папу. Она привыкла выходные быть «с папой», то есть, у бабушки. Но бабушки уже нет(, и квартира ее пошла под аренду, другие дети постарались.
Сейчас получается, она уже несколько раз ночевала у нас, такой себе хостел в однушке, где пара и подросток 15 лет. Ясно, что правит всем она- целый день телевизор, смотрим что она хочет, я в роли кухарки, кушать готовить что ей хочется, в итоге он сваливает к брату ночевать, потому что негоже папе спать с женщиной при возрастном ребенке.
Меня это достало, случился скандал. Снимать двушку ради разовых визитов дочери он не собирается. Переезжать в мою квартиру- я не согласна, там осталась жить моя взрослая дочь и у нее своя жизнь.
В итоге он сердится, почему я не мама для его дочки и не хочу ее развлекать на выходные.
А я сержусь, что выходной у меня один и тоже хочу отдохнуть и поделать домашние дела, а не быть няней для барышни 15 лет.
Простите за простынь, рассудите!