Середина XIX века стала для Сум началом строительства усадьбы и посадки деревьев вокруг нее. Тогда И. Асмолов решил купить землю в центре города для строительства своей резиденции. Дом строили относительно недолго, но вот деревья для парка собирали со всего мира. Здесь вместе с местными деревьями уживались экзотические. Сейчас в парке насчитывается около 100 хвойных и лиственных деревьев, а также 30 сортов сирени. В нынешние времена дом Асмолова является одним из корпусов диспансера радиационной защиты населения. Парк и усадьба И. Асмолова являются одними из красивейших памятников садово-паркового искусства в городе.