Od połowy XVIII w. Smażyno było własnością jednej z gałęzi rodziny Wejherów (pisanych "von Weiher"). Rodzina ta w połowie XIX w. zbudowała dla siebie nową siedzibę. To neoklasycystyczny pałac: trzykondygnacyjny budynek na planie prostokąta z pozornymi ryzalitami bocznymi, otoczony parkiem. Po II wojnie światowej pałac należał do PGR, od lat 80. mieści Ośrodek Terapii Uzależnień i jest niedostępny do zwiedzania.