Главный дом был построен в 1760-1770-е годы Василием Баженовым по заказу статского советника генерала Михаила Измайлова. Измайлов главой кремлевской экспедиции дворцовых строений был.
В 1840-х годах усадьбу перестроили для воронцовых. Этим швейцарский архитектор Бернар симон занимался.

К сожалению, интерьеры Баженова не сохранились. До нас дошли фасады дома, которые появились при Симоне. Но зато уцелела усадебная баженовская церковь в готическом стиле.