История поместья до конца XVIII века исследована не очень хорошо. Известно, что к середине столетия земля принадлежала графине Наталье Павловне Ягужинской (1716–1786), вышедшей замуж за унтер-лейтенанта флота Федора Головина, а в 1772 году перешла его племяннику — коллежскому советнику Ивану Головину. В 1783 году тот продал имение местному предводителю дворянства, полковнику Ф. И. Боборыкину (1726 — после 1787), у наследников которого Михайловскую вотчину, в которую входило село Красное, и приобрел в 1793 году генерал-майор Александр Петрович Ермолов (1754–1834).

Александр Петрович попал в фавориты Екатерины в 1784 году, после смерти предыдущего любимца императрицы, конногвардейца Александра Ланского (1758–1784). «В случае» он пробыл недолго — всего 16 месяцев, а к моменту покупки Красного уже три года как был женат на княжне Елизавете Михайловне Голицыной (1768–1833).

Дошедший до нас усадебный комплекс, построенный в период с 1793 по 1809 годы, включает остатки пейзажного парка с тремя проточными прудами, господский дом, церковь и скотный двор. По наиболее распространенной версии, проект был разработан выдающимся зодчим Василием Ивановичем Баженовым (1738–1799), но само строительство проходило под руководством другого мастера, неизвестного.