Pijpjes buren belemmeren bouwwerkzaamheden?

Ik woon in de binnenstad en heb vergunning om een stuk aan te bouwen tussen 2 bestaande woningen in. Alle woningen om mij heen hebben 2 verdiepingen en een kap, ik 1 verdieping en geen kap. Dat gat mag ik nu dus volbouwen.
Binnen de VvE is dit goedgekeurd.
Echter, om de wanden van de aanbouw te plaatsen, moet ik strak tegen de bestaande muren bouwen (zoals op vergunde tekening) maar daar hangen pijpjes van de buurman.
Deze pijpjes hangen dus boven mijn erf/perceel. Ik heb de buurman meermaals gevraagd deze weg te halen, en deze weigert vooralsnog hard. Ook ben ik - met zijn toestemming - wezen kijken of ik het desnoods zelf kon doen maar omdat het echt een ingreep door zijn woning is, wil ik daar eigenlijk niet aan beginnen (klussen in andermans woning).
Kan ik de buurman 'vorderen' deze pijpjes weg te halen?
Ik woon hier zelf nu sinds 2016, dus heb geen idee of die pijpjes er al langer dan 20 jaar zitten (verjaring) maar neem aan dat de eventuele bewijslast daarvoor bij de buurman ligt.

Ik zou hier uiteraard nooit moeilijk over doen, maar op dit moment dreigt het mijn bouw stil te leggen.