Відомі сумські підприємці Харитоненки були власниками найбільшого цукрового заводу і деяких інших закладів муніципального значення. Історія будівлі розпочалася з садиби Наталії Харитоненко. У 1889 році маєток став дитячим притулком. По смерті Наталії справу продовжила невістка Харитоненка Віра Андріївна. Заклад став притулком для дівчаток, тих, хто позбувся одного з батьків або всієї родини. Незабаром при сирітському домі відкрили навчальний заклад, де вихованки могли здобувати професійні навички і отримувати фінансову допомогу. На сьогодні більшість сумчан з’являються на світ саме тут. Двоповерховий пологовий будинок у світлих відтінках – приклад архітектурного українського сучасного стилю.