Barokowa Akademia Rycerska zbudowana została wg projektu Krystiana Hertela. W 1709 r. powstała ujeżdżalnia. W latach 1728-41 pod kierownictwem Jana J. Scheerhofera zbudowano gmach główny, prace przerwało wkroczenie wojsk pruskich. Studia w Akademii trwały 3 lata, kształciła ona młodzież szlachecką po ukończeniu 16 roku życia. W 1811 r. powołano tu Gimnazjum Johanneum. W latach 1945-78 obiekt zajęła Armia Czerwona.