O istnieniu - od średniowiecza - w Górze młyna i karczmy świadczą rejestry podatkowe zakonu krzyżackiego. Ówczesne budynki nie dotrwały jednak do czasów obecnych, nieznana jest też ich dokładna lokalizacja. Na przełomie XIX i XX w. wybudowano w centrum wsi nowoczesną karczmę, obejmująca też dużą salę ze sceną i balkonem. Obiekt pełnił więc nie tylko funkcje hotelowo-gastronomiczne, ale i kulturalne (dzięki zaangażowaniu m.in. koła gospodyń wiejskich). Po II wojnie światowej w budynku karczmy były pomieszczenia szkoły i sklep.