Здание построено в 1928 году по проекту архитектора В. К. Олтаржевского для кооператива «Московское объединение». Изначально имело 5 этажей, угловая часть была оформлена террасой, располагавшейся над трёхэтажным полукруглым эркером, и завершалась высоким пилоном с круглым окном и пирамидальным аттиком. В здании размещался «Универмаг № 100».
Однако уже в начале 1930-х годов дом был перестроен архитектором В. М. Маятом: он надстроил 6-й этаж, сделал башню гранёной и поднял её на всю высоту прежнего аттика. По торцам пилонов и над входным вестибюлем были высечены крупные рубленые надписи: «Универмаг Торгсин».
Первый этаж здания на Смоленской площади занял Торгсин, или Всесоюзное объединение по торговле с иностранцами на территории СССР, созданное в годы острого валютного кризиса и просуществовавшее с января 1931 года по январь 1936 года.
14 июня 1931 года Торгсин открыл двери гостям из-за рубежа и советским гражданам, которые могли покупать продукты питания или иные товары в обмен на валютные ценности, в том числе — на царские золотые монеты, бытовое золото, серебро, платину, бриллианты и другие драгоценные камни.
«Универмаг Торгсин» на Смоленской площади описан в одном из эпизодов романа М. А. Булгакова «Мастер и Маргарита».
После упразднения Торгсина в 1936 году гастроном стал называться Смоленским (или № 2 после Елисеевского).
Вплоть до середины 70-х годов XX в. на верхних этажах находились квартиры, в основном коммунальные. Затем дом был расселен, а после ремонта верхние этажи отданы в распоряжение МИДа, основное здание которого находится рядом на Смоленской площади.