Уникальное историческое здание, ведущее свою историю с XVI века, когда здесь располагались деревянные палаты семьи Волынских. Сегодняшние очертания особняка в стиле рококо приобрело в 80-е годы XVIII века после кардинальной перестройки, фактически, нового строительства по проекту архитектора Семена Карина.

Стройка велась для генерал-майора С.Н. Салтыкова, большого любителя роскоши и обладателя изрядного состояния. Но уже в 1831 году усадьба переходит в собственность иной аристократической фамилии — Чертковым.