В 1812 году на этом месте был построен главный корпус усадьбы губернатора Алексея Панчулидзева. Два года спустя пожар практически уничтожил здание, но предприимчивый глава региона сумел заставить власти Саратова купить у него, по сути, обгоревшие стены.
Деньги на перестройку и приспособление усадьбы под учебное заведение собирали местные дворяне и частные лица. Работами, продолжавшимися до 1818 года, руководили местный архитектор Василий Суранов и зодчий из Казани Иосиф Мари. Под их надзором было выстроено главное двухэтажное здание, украшенное портиком и колоннами.
Занятия в Первой мужской гимназии начались 9 ноября 1819 года. В основном, её учениками были дети чиновников и дворян, обучавшиеся по программам классических гимназий. В своё время это учебное заведение окончили лингвист Александр Пыпин, историк Даниил Мордовцев, композитор Виктор Пасхалов, изобретатель дуговой лампы Павел Яблочков и другие выдающиеся личности.
В 1918 году мужская гимназия стала 1-й Единой трудовой советской школой II ступени. В 1930-х годах с фасада здания исчезли многие элементы декора. Сейчас помещения здания занимает Волжский районный суд Саратова. Неподалёку расположены Дом офицеров и сад «Липки».
