Notarvertrag Baugenehmigung

Hallo,
folgende Situation. Ich habe einen Resthof gekauft von einem Landwirt. Dieser hat im Notarvertrag versichert, dass es für alle Gebäude eine Baugenehmigung gibt. Nun stellt sich raus, es gibt für sehr viele Gebäude keine Baugenehmigung. Weiterhin wurde mir ein Schreiben vom Bauamt überreicht indem der alte Eigentümer damals schon schriftlich aufgefordert wurde fehlende Baugenehmigungen einzuholen. In dem Schreiben wird erwähnt, dass nach der Ortsbesichtigung...... die und die Baugenehmigungen fehlen und eingeholt werden müssen. Mit einer Frist. Diese ist dann verstrichen. Bauamt hat nicht wieder nach gehakt. Der alte Eigentümer hat dann an mich verkauft, ohne was davon zu sagen. Im Gegenteil versichert im notariellen Kaufvertrag, dass es für alle Gebäude eine Baugenehmigung gibt. Angesprochen auf das damalige Schreiben vom Bauamt mit der Aufforderung wurde mir gesagt, dass Schreiben sei nie angekommen bei ihm. Und auch mein Hinweis auf die im Schreiben erwähnte Ortsbesichtigung, äußert der Bauer: Irgendjemand sei mal aus einem Auto gesprungen, hätte Fotos gemacht und sei dann quasi wortlos auf und davon. Aber konkret wisse er nichts von den damaligen Vorwürfen des Bauamtes. Dazu ist anzu merken, dass der Bauer Ahnung hat, dass man Baugenehmigungen braucht, da er vorher auch schon was gebaut hat für das es auch Baugenehmigung gibt. Das Bauamt will nun, dass die fehlenden Genehmigungen nachgeholt werden. Was bei dem Umfang der fehlenden Genehmigungen sehr viel Geld kosten wird. Angesprochen äußert der Verkäufer, er wird sich etwas beteiligen an den Kosten mehr nicht. Und er behauptet ich hätte an den Gebäuden selbst was verändert. Und deshalb würde er sich zwar beteiligen, aber nur im geringen Maße. Ich habe kein Gebäude baulich verändert. Ich möchte keine Rückabwicklung des Kaufvertrages. Denn das ist mein Zuhause. Ich möchte, dass der Notarvertrag erfüllt wird und es für alle Gebäude eine Baugenehmigung gibt. Wie seht ihr die Chancen, dass der Bauer alle Kosten zur Erbringung der Genehmigungen übernehmen muss? Wer ist in der Beweispflicht dafür, dass ich angeblich die Gebäude verändert haben soll? Welche Tipps könnt ihr mir geben? Danke