Во второй половине XVIII века в Вологде возле Каменного моста построили четыре круглые башни в три этажа, которые составили единый ансамбль. В 1820-х годах ко всем ним добавили торговые ряды со стороны реки.
В конце XIX столетия в Вологде перестроили одну из двух уцелевших башен под гостиницу «Пассаж». Номера находились на первом этаже, ресторан и магазины — на втором. Гостиница была на третьем месте по уровню обслуживания после «Золотого якоря» и «Эрмитажа».
В июле 1917 года в «Пассаже» поэт Сергей Есенин обедал со своей невестой Зинаидой Райх. С ними здесь был и вологодский поэт Алексей Ганин. Возможно, именно отсюда Есенин и Райх поехали в церковь Кирика и Иулиты в пригород, чтобы обвенчаться. Алексей Ганин так писал о гостинице: «Дешёвый шик провинциального ресторана, при входе чучело медведя держит блюдо в лапах. Тишина и умиротворение…». Согласно легенде, Сергей Есенин бросил монетку на это блюдо. После венчания молодые со свидетелем вновь приехали в «Пассаж», чтобы отпраздновать это событие в ресторане гостиницы.
В 1918 году «Северная федерация анархистов» превратила здание в свою штаб-квартиру. Большевики потребовали освободить здание, и, когда последовал отказ, взяли его штурмом. Они переписали порядка 100 анархистов и отпустили, велев уехать из Вологды в течение 24 часов.
До 1929 году в бывшем «Пассаже» работали Вологодский уком ВКП(б) и уездный исполком. После в здании находилась поликлиника №1. С 2012 года здесь проводятся восстановительные работы. В «Пассаже» планируется открыть туристический центр, гостиницу и ресторан.
