Здание входило в комплекс построек усадьбы графа А. Ф. Орлова. После революции 1917 г. использовалось в качестве тюрьмы. С 1962 по 1985 год в здесь размещалась детская библиотека № 3. В 1990-е гг. здание арендовала "Церковь Державной Божьей Матери". В начале 2000-х планировалась реконструкция здания под кафе.