Здание Дворянского собрания было построено в Орле на Садовой улице (ныне ул. М.Горького) в 1823 году. В начале сентября этого года Орёл посетил император Александр 1. 5 сентября император открывал бал в «новопостроенном Доме дворянства», который стал одним из центров культурной и общественной жизни города. В Дворянском собрании устраивались приёмы особ царской фамилии и почётных гостей, давались балы, маскарады, костюмированные вечера, выступали знаменитые певцы, актёры, музыканты.
В Орле Бунин и Варя Пащенко бывали на балах, которые по зимам давались в Дворянском собрании. В романе «Жизнь Арсеньева» он вспоминал: «Каким счастьем были для меня балы… Меня каждый раз поражала её юность, тонкость: схваченный корсетом стан, лёгкое и такое непорочно-праздничное платьице, обнажённые от перчаток до плечей и озябшие, ставшие отрочески сиреневыми руки, ещё неуверенное выражение лица… только причёска высокая, как у светской красавицы… Вскоре к ней кто-нибудь подбегал, с привычной бальной поспешностью низко кланялся, она передавала веер Авиловой и как будто рассеянно, с грацией клала руку ему на плечо и, кружась, скользя на носках, исчезала, терялась в кружащейся толпе, шуме, музыке».
Похолодели лепестки
Раскрытых губ, по-детски влажных –
И зал плывёт, плывёт в протяжных
Напевах счастья и тоски.
Сиянье люстр и зыбь зеркал
Слились в один мираж хрустальный –
И веет, веет ветер бальный
Теплом душистых опахал.
В декабре 1892 года в зале Дворянского собрания выступил с концертом С.В.Рахманинов. Спустя восемь лет, в апреле 1900 года, Бунин познакомился с Рахмановым в Ялте. В воспоминаниях «Рахманинов» Бунин писал: «Проговорив чуть не всю ночь на берегу моря, он обнял меня и сказал: «Будем друзьями навсегда!» Дружеские отношения связывали Бунина и с Ф.И.Шаляпиным, с которым он познакомился в ноябре 1901 года. Примечательно, что 21 ноября этого года Шаляпин выступил с концертом в Орле. В газете «Орловский вестник» 23 ноября 1901 года сообщалось: «В зале Дворянского собрания состоялся концерт Ф.И.Шаляпина. Концерт был сплошной овацией даровитому артисту».
Здание Дворянского собрания было разрушено в 1919 году. На этом месте теперь находится Орловский академический театр им. И.С.Тургенева (с 1975 года).