Первоначально кирпичное здание со сводчатыми подвалами построено на этом месте в первой половине XVIII века в комплексе тогдашних торговых рядов. После последнего большого пожара 1768 года стало единственным уцелевшим зданием в прилегавшем квартале и в экспликации топографического плана города, выполненного в том же году, обозначено как "питейные палаты". Генеральным планом 1778 года был образован квартал № 6, угол которого закрепило это здание. В начале XIX века дом был сильно перестроен, получил скруглённый угол в 3 оси и оформление стен небольшими надоконными нишами круглой и ромбической формы, членение фасада осуществлено лопатками — с базами на уровне цоколя, но без капителей. При перестройке в конце XIX века дом получил небольшой угловой балкон на бетонном основании.
После 1918 года здание было национализировано, в дальнейшем нём располагались различные учреждения. В настоящее время здание занимает Следственное управление СК РФ по Ярославской области.