Mondelinge toezegging voor baan bij interne vacature weer ingetrokken

Op dit moment werk ik fulltime en met een contract voor onbepaalde tijd bij mijn werkgever. Onlangs heb ik intern gesolliciteerd en ben ik al na een gesprek mondeling aangenomen via de telefoon, waarbij ik het aanbod heb geaccepteerd (zonder opmerkingen over salaris, startdatum en zo meer). Daar was mijn vriendin op dat moment getuige van en ook staat de beslissing op de e-mail tussen mijn nieuwe manager en mij.

Nu wil de manager mij alsnog de baan niet aanbieden en er onderuit komen, omdat in het tweede gesprek, die bedoeld was om de overdracht goed te regelen, naar de manager werd gemeld dat er twijfels waren ontstaan over mijn geschiktheid.

Ik denk dat ik in mijn recht sta met het aanbod en voor mij betekent dat een stap vooruit in carrière en salaris.

Kan de nieuwe manager mij deze functie dan alsnog weigeren?