Основа усадьбы оформилась чуть раньше в результате объединения нескольких участков в первой половине XVIII века, когда ее владельцем стал генерал-аншеф С. А. Салтыков, с 1732 по 1741 год московский главнокомандующий. Родовая усадьба занимала целый квартал: от Тверской улицы до Большой Дмитровки и от Глинищевского переулка почти до Козицкого. Разрушительный пожар 1812 года практически не повредил главный дом.
Дочери последнего графа Салтыкова – Ивана Петровича – Анна Ивановна, в замужестве Орлова, и Прасковья Ивановна, по мужу Мятлева (мать литератора Ивана Петровича Мятлева, сочинявшего стихи на случай, эпиграммы и пародии, дружившего с Пушкиным, Жуковским, Вяземским и Лермонтовым), стали одними из последних в роду Салтыковых, кто владел усадьбой. Она сначала стала собственностью Орловой, затем перешла к Мятлевой и, наконец, – к ее внуку Петру Ивановичу. Но Мятлевы предпочитали жить в Петербурге.
Одно время управляющим усадьбой был крепостной Салтыковых Петр Погодин, сын которого Михаил родился здесь 11 ноября 1800 года и впоследствии стал знаменитым историком, журналистом и писателем.
Отдельные строения в усадьбе сдавались внаем. Так, например, в 1828 году здесь находился известный в Москве пансион Кистера, в котором тогда учился будущий знаменитый историк Грановский, участвовавший там в литературных вечерах.
В 1839 году усадебный дом с двором и садом был сдан в аренду Купеческому обществу для размещения клуба.
Дом по Большой Дмитровке исполнял с 1839 по 1909 год роль Купеческого клуба. Позже Купеческий клуб переехал на Малую Дмитровку, в дом № 6, где теперь театр «Ленком».
Члены купеческого собрания имели право на бесплатный вход в клуб в любое время, игру в бильярд, карты, шахматы, могли брать книги на дом, участвовать в семейных вечерах, балах, маскарадах и приглашать с собой двух дам. Особо почетными посетителями клуба считались представители городских властей: генерал-губернатор, губернатор, предводитель дворянства, городской голова, обер-полицмейстер. В ресторане клуба выступали замечательные хоры, русские и цыганские, в том числе знаменитый цыганский хор Ильи Соколова. Это было время, когда, по словам Льва Толстого, «на Руси ни одной музыки не любили больше цыганской, когда любить слушать цыган и предпочитать их итальянцам не казалось странным».
Купеческий клуб славился на всю Москву квасами и фруктовыми водами, секрет приготовления которых знал только один многолетний эконом клуба – Николай Агафоныч…
На балах и маскарадах в клубе играли лучшие оркестры под управлением Степана Рябова, а также Сакса, Блезе и Крейнбринга. В бывший дом Петра Салтыкова съезжались не только