Особняк был построен для губернского предводителя дворянства Александра Наумова, который одно время был министром сельского хозяйства империи. Автором проекта стал местный архитектор Александр Щербачев, вдохновлявшийся зодчеством итальянского Возрождения.
Здание было возведено в 1898-1905 годах из известняка, добытого в Жигулёвских горах. Архитектор спроектировал корпуса для прислуги, автономную электростанцию, зимний сад и винные погреба. До наших дней не дошли фонтан во дворе дома, вазоны и фамильный герб Наумовых на крыше.
Александр Наумов жил в этом особняке в 1905-1915 годах, потом переехал в столицу и продал здание. В 1930-е годы здесь разместили Дом пионеров, и большая часть интерьеров была утрачена. Теперь в памятнике архитектуры федерального значения находится Дворец детского и юношеского творчества.
