Werkgever vraagt niet gemaakte studiekosten terug bij vertrek?

Mijn huidige werkgever was bereid om mijn studie te betalen (een vierjarig hbo-deeltijd). Daarbij hebben we een studieovereenkomst opgesteld. Zodoende is er een potje vrij gemaakt om dit te financieren. Met dit potje kan je dus in een keer de volledige studie betalen (dus de gehele 4 jaar). Maar wat ik aan het begin van ieder nieuw school jaar uitvraag is een factuur voor één college jaar en die hebben ze dus betaald. Echter, ik ga weg bij mijn huidige werkgever en ik moet dit dus volledig terug betalen, de volle 100 %. Alleen heb ik het potje nooit opgemaakt omdat ik twee jaar heb laten uitbetalen.

Hierbij even een voorbeeld met fictieve getallen:
Ik zit in het tweede jaar van mijn studie en er is dus twee jaar betaald.
In de studie overeenkomst is dus afgesproken 7000 euro te besteden aan mijn studie.
Het eerste jaar heeft 1000 euro gekost en dit is betaald.
Het tweede jaar heeft het 2000 euro gekost en dit is betaald.

Wat dus maakt dat de gemaakte kosten neerkomen op 3000 euro en niet de volledige 7000. Waardoor er een rest geld is van 4000 euro wat niet is gebruikt.

Dus mijn vraag is, mogen ze dus het rest geld terugvragen terwijl dit niet is besteed?