Großmutter verbietet den Umgang zu seinen kindern

Hallo zusammen
Ich habe folgendes problem...

Ich habe mich vom Kindsvater getrennt er lebt jetzt bei seiner mutter bis er ne wohnung hat. Wir haben ausgemacht das er seine 2 kinder alle 2 Wochenenden von freitag bis Sonntag holt... das erste Wochenende hat auch super geklappt nun ist es aber so das er sie nicht mehr holt mit der Begründung seine mutter verbiete es... es wäre kein platz und er wäre ja nur geduldet und sie wäre dauernd im stress... ich kenne die familie und ich kenne auch die wohnverhältnisse... platz ist definitv vorhanden. Ich finde es einfach nur unfair den kindern gegenüber sie vermissen ihren vater und auch die großmutter... gibt es da Regelungen die sagen das sie den Umgang erlauben muss? Ich mein es kann doch nicht sein das er seine kinder nicht holen darf weil es ihr zu stressig ist