Nachbar brüllt uns an und terrorisiert

Hey zusammen,

wir wohnen seit 1 1/2 Jahren in einer Mietwohnung, seit knapp einem Jahr haben wir massive Probleme mit dem Untermieter bzw. Nachbar unter uns.
Wir sind jung, haben weder Kinder noch Tiere und ein geringes Interesse an Partys.
Aufgrund von Job/Uni gehen wir immer gegen 21.30 ins Bett, und kommen meist gegen 15 Uhr von der Arbeit. Am Wochenende sind wir immer bei meinen Eltern.
Zunächst kam der Nachbar wegen Baulärm nach oben, der unserem Einzug geschuldet war (Einige Möbel kamen erst später). Es wäre ihm zu laut, auch ausserhalb der Ruhezeiten. Wir haben also erstmal nichts mehr gebaut. Als meinem Freund dann einmal gegen Abend seine Federmappe runter fiel, brüllte uns der Nachbar zum ersten mal an. Wir sind nie laut, aber scheinbar stören ihn sogar unsere Alltagsgeräusche.
Als er vor einiger Zeit nach 22 Uhr derartig laut Musik hörte, beschwerten wir uns dann.
Heute als ich nach Hause kam brüllte er aus heiterem Himmel wieder, als wir gerade gekocht haben. Ich bin stinksauer, mein Freund hat Angst vor dem Nachbarn und will keinen Streit. Wir können jedoch beide nicht in dauerhafter Einschränkung durch diese Person leben. Ein Umzug kommt für meinen Freund auch nicht in Frage.
Was können wir tun? Wenn wir klingeln öffnet er nicht.

LG Maria