Du kannst als Akademiestudent belegen und wechseln, soviel du willst (und selbst wenn man in einem regulären Studiengang endgültig nicht besteht, heisst das ja auch nicht, dass man dann nichts anderes mehr studieren darf).
Aber bevor das akut wird, müsstest du ja schon 3x durch Mathe durchfallen, um die Zugangsprüfung nicht mehr machen zu können - davon würde ich an deiner Stelle eigentlich erstmal nicht ausgehen