Построен в конце 1820-х годов купцом 3-й гильдии Серапионом Взломцевым. С 1840-х годов принадлежал владельцу первого в Нижнем Новгороде сталелитейного завода Рукавишникову М. Г. Дважды перестраивался — в 1875 и 1876-1877 годах. Рукавишников С. М. решил превратить усадьбу на Верхневолжской набережной в величественный комплекс с домом в стиле итальянского палаццо. Здание обильно украшено лепниной, балкон поддерживают атланты, а оконные простенки занимают горельефные фигуры кариатид (скульптор М. О. Микешин).
С 1924 года краеведческий музей, ныне входящий в объединение ГБУК "Нижегородский государственный историко-архитектурный музей-заповедник". Усадьба Рукавишниковых является объектом культурного наследия регионального значения. В 1994-2010 годах проведена реставрация.