Повітове дворянство, для якого була зведена ця будівля, була організацією дворян, що існувала в Росії з 1775 року. Їй надавалось право вибирати із свого середовища повітового голову дворянства.
Будинок знаходиться на території колишнього саду Кондратьєвих – найбільших дворян – землевласників у Сумському повіті, до роду яких належав і засновник міста Г. Кондратьєв.
В будинку вдало поєднано офіційну парадність з підкресленою розкішшю оздоблення. На першому поверсі знаходились ресторан, музичний салон та театральний зал, в якому виступали у різні часи Шаляпін, Собінов та артисти Міланської опери.
На другому – кімнати для куріння та зали для гри в азартні ігри. Також до будівлі примикав великий парк, де любили прогулюватися люди «з вищого світу».
Після революції будівля дворянського зібрання перетворилася на філармонію.
