Построен по землебитной технологии. 23 августа 1799 года передан Ордену св. Иоанна Иерусалимского. В 1820-х годах в здании временно размещалась лютеранская церковь. В 1880-х подвергся реконструкции для размещения в нём придворных певчих. Во время Первой мировой войны отдан под госпиталь. С 1924 года в здании размещалась экскурсионная станция. В 1930-1940-х годах база отдыха для рабочих ряда ленинградских заводов. Во время Великой Отечественной войны частично разрушен. После войны в нём располагалась военно-строительная часть, затем Дом пионеров. С 1968 года районный краеведческий музей. В начале 1980-х началась реставрация, которая продолжалась до 2004 года.