После постройки принадлежало вотчинной конторе Шереметевых, в 1872 сдано в аренду клубу приказчиков. На 1-м этаже клуба располагались комнаты для игр в карты и ресторан, на 2-м — зрительный зал на 300 мест. Также в 1870-х в здании располагался театр. В 1879 сооружение серьезно пострадало от пожара. Затем, в 1886 году дом подвергся реконструкции. В 1888 городское общественное управление выкупило здание у Шереметевых. В 20-м веке здесь располагался молокозавод, в его 80-е годы — Ленинский районный суд, а в 90-е — налоговая инспекция. В начале 2000-х годов здание перешло на баланс ИГЭУ.