Na nasypie dawnego grodziska, nad Prosną Kazimierz Wielki wzniósł w XIV w. gotycki zamek. W drugiej połowie XIV w. zamek został oddany jako lenno księciu opolskiemu Władysławowi Opolczykowi, który w imieniu Ludwika Węgierskiego miał sprawować w Polsce rządy. Właśnie Władysławowi Opolczykowi zawdzięczamy sprowadzenie z Węgier do Polski paulinów, którzy osiedli w pobliskiej Częstochowie na Jasnej Górze. Bolesławiecki zamek jak wiele innych polskich zamków został zniszczony w czasie potopu szwedzkiego. Zachowała się jako atrakcja jedynie ośmioboczna wieża i malownicze ruiny. Krążą legendy, że na jego dziedzińcu zostały zakopane skarby Władysława Opolczyka.