Budynek dawnej Akademii powstał w pierwszej połowie XVIII wieku. Najpierw zbudowano zachodnie skrzydło, potem pozostałą część. Na fasadzie budynku można zobaczyć barokowe zdobienia, a wewnątrz - piękne sale. Do Akademii uczęszczali młodzieńcy z rodzin szlacheckich i magnackich z Polski i Śląska. Od 1811 do 1944 roku mieściło się tu gimnazjum, a po II wojnie światowej stacjonowali tu żołnierze radzieccy. Obecnie budynek zajmuje kilka instytucji: Szkoła Muzyczna, Legnickie Centrum Kultury, oddział Muzeum Miedzi, Urząd Stanu Cywilnego i niektóre wydziały Urzędu Miasta.