Synagoga znajduje się w centrum miasta, na skrzyżowaniu ulic J. Piłsudskiego i Górnej. Została zbudowana w 1850 roku. Nazwa „Kaukaski Beth Midrasz" pochodzi od kupców, którzy z Kaukazu sprowadzali skóry do miejscowych garbarni. W czasie II wojny światowej budynek uległ poważnym zniszczeniom na skutek dewastacji i pożaru. W 1955 roku obiekt został przebudowany na potrzeby kina, a obecnie mieści się w nim Dom Kultury. Na zewnętrznych ścianach zachowały się architektoniczne elementy charakterystyczne dla bóżnic.