Усадьбу на соборной Горке построили для череповецкого городского головы Ивана Андреевича Милютина в 60-е годы XIX века.

Стилистически дом представлял собой пример эклектики: первый этаж (каменный) был выполнен в классическом стиле, деревянные второй этаж и веранда - в псевдорусском стиле. Крыша была двухуровневой, с просечным железом на фронтонах. В декоре интерьеров применялась лепнина, барочное оформление имели изразцовые печи. До шексны спускался парк, в котором росли липы, ели, сосны. Дом Милютина окружал яблоневый сад, была посажена сирень. Около дачи находился искусственный пруд, облицованный белой плиткой
.
Парк для Череповца уникальный, так как сохранил следы первоначальной планировки конца XIX - начала XX века.
После национализации в 1918 году бывший дачный дом Милютиных стал коммунальным. В результате неоднократных перестроек и перепланировок были утрачены галереи, балконы, мезонин, изящный декор кровли из просечного железа.
В 2005 году из-за крайней ветхости остатки здания снесли.
Милютинскую дачу специалисты воссоздавали по сохранившимся плану, чертежам и фотографиям.