Wekelijkse samenkomst vrienden in mancave geoorloofd?

Ons huis staat op 20 cm vanaf de erfgrens. Onze buurman heeft op ongeveer 6 meter afstand van onze slaapkamer een mancave/bierkeet. Hier heeft hij iedere zaterdagavond een groep vrienden over de vloer. Hij doet netjes om 23 uur de muziek uit, maar blijft nog zitten praten/lachen/bier drinken etc. tot 2-3 uur in de nacht. Waarna er luidruchtig afscheid genomen wordt en er bierflesjes worden opgeruimd. Hierdoor kunnen wij de raampjes in onze slaapkamer niet open doen en kunnen wij niet ventileren. Dit is nog tot daar aan toe, maar op onze bovenverdieping (schuin dak) is het geluid door pir isolatie (ruim 20 cm) duidelijk hoorbaar en zorgt voor overlast. Wij zijn al het gesprek met de buurman hierover aangegaan, maar hij vindt dat hij na lange werkweek recht heeft op ontspanning op zijn eigen terrein. Klopt dit?