Kan ik stiefkind toegang weigeren tot woning?

Mijn stiefkind (18 sinds zomer) is twistziek en heeft onbeheerste woedeaanvallen, hoogstvermoedelijk door een gedragsstoornis (oppositioneel opstandig gedrag). Ik ben getrouwd met zijn vader en samen hebben wij een huis waarvan wij beiden eigenaar zijn. Het stiefkind is ingeschreven bij zijn moeder. Er is ooit co-ouderschap afgesproken en de (kinder)alimentatie is daarop afgestemd. Mijns inziens is er geen sprake van dat mijn partner, mijn stiefkind en ik een 'gezin' vormen, aangezien hij ingeschreven staat bij zijn moeder, onze onderlinge band niet goed is en zijn ouders prima samen in de lasten voor zijn levensonderhoud/opleiding kunnen voorzien. Naar mijn idee ben ik dus niet stiefouder volgens de wet. De omgangsregeling was tot nu toe zo dat hij een paar weken bij zijn moeder is en dan een paar weken bij ons (zijn vader werkt in het buitenland). Volgens mij geldt deze omgangsregeling van rechtswege niet meer, omdat mijn stiefkind inmiddels 18 jaar is. De ouders hebben deze regeling stilzwijgend voortgezet en zonder dat ik hierover iets heb kunnen inbrengen, echter voor mij is deze omgangsregeling veel te zwaar. Ik heb een fulltime baan en zorg voor mijn ouders (mantelzorg). Door het gedrag van mijn stiefkind raak ik uitgeput/overspannen. Ik wil de duur dat hij bij ons is, verkorten. Elke periode dat hij bij ons is, weigert hij kleine huishoudelijke taken te doen, zoekt ruzie en gaat over alles in discussie. Elke periode is er ook altijd een majeur incident: hij weigert iets te doen (bv. bord opruimen), er volgt een discussie, hij zoekt ruzie met hatelijke opmerkingen e.d.. Door zijn opzettelijke gedrag is ruzie vrijwel onvermijdelijk (hij zoekt je op, intimideert je e.d.). De-escaleren lukt door zijn stoornis helaas nauwelijks. Ik raak hier overspannen van (zit inmiddels ziek thuis) en wil zijn bezoeken terugbrengen naar kortere periodes, bv. 1 week in plaats van 3 weken achter elkaar. Ook is mijn vader zeer ziek en hij heeft nu alle tijd/aandacht nodig, ik kan mijn stiefkind er even niet bij hebben. Geholpen door zijn moeder, de ex van mijn partner, heeft hij aangekondigd dat hij gewoon weer een aantal weken langs zal komen. Hij heeft de sleutel van ons huis. I.v.m. mijn vader wil ik hem aankomende periode even niet in mijn huis hebben, hij kan prima bij zijn moeder blijven. Ondanks de via de rechter bepaalde omgangsregeling is hij zelf toen hij 15 was eens 9 maanden lang niet bij zijn vader/mij langsgekomen, omdat hij 'geen zin' had om langs te komen. Zijn moeder en hij hadden maling aan de rechter. Nu komt het mij niet uit maar hij dreigt langs te komen en zijn moeder eist anders dat zij meer geld krijgt voor boodschappen enz. Kan ik als mede-eigenaar van de woning mijn stiefkind de toegang ontzeggen, en als hij toch komt en mijn woning met de sleutel binnendringt, bijvoorbeeld aangifte tegen hem doen van huisvredebreuk? Of wat kan ik doen?