Undichte Fenster - schon im Mietvertrag aufgeführt

So und nun zu meiner Frage.
Ich habe im Sommer eine Altbau Wohnung gemietet. Im Mietvertrag ist aufgeführt, dass je ein Fenster in 2 Zimmern einen Sprung haben.
Jedoch zieht es in der Wohnung. Auch in den anderen Zimmern ist es kalt. Soweit ich das feststellen könne aufgrund der schliessung. ich habe selbst versucht die Fenster mit so einem Gummi aus dem Baumarkt ab zu dichten doch ohne erfolg.
Was kann ich da machen?