У 1818 році будинок був найнятий чоловічою гімназією, яка займала його до 1822 року. У 1823 році цей будинок придбало дворянське зібрання Херсонської губернії. Дворянське зібрання займалося питаннями станів, суперечками між землевласниками, організацією благодійних заходів, вели родовідні книги.
Після революції 1917 року були скасовані стани та дворянство як клас перестало існувати. У 1918 році за розпорядженням Херсонського губернського комісаріату в будівлі були розміщені українські національні організації.
У 1920-х роках тут знаходився Будинок фізкультури, в 1940 році — Центральна дитяча бібліотека, з 1945 року — Палац піонерів. Після розпаду Радянського Союзу в будинку Дворянського зібрання розміщувалися повітова управа «Вільного козацтва» і товариство «Українська книгарня».
У 2002-2003 роках будівля була відреставрована, після чого в ній знаходиться комерційний банк.
