Точная дата постройки этого здания неизвестна, но оно было возведено после 1797 года, когда сгорел деревянный постоялый двор на этом месте. Своё подворье монахи Югской Дорофеевой пустыни построил в Рыбинске в конце XVII столетия.
На пожарище было построено новое подворье с лавками, часовней и жилыми комнатами. В 1905 году сохранившееся здание получило свой современный вид. Его угловая часовня является важным акцентом в перспективе бывшей Торговой площади и двух улиц. Сейчас внутри находятся жилые помещения и магазины. С железнодорожного вокзала до остановки «Улица Стоялая» можно доехать на троллейбусах №№3 и 5, с автовокзала — на троллейбусе №1 и автобусах №№1 и 3.
Старец Дорофей основал обитель в 1615 году на реке Юга в 17 верстах от Рыбной слободы, как тогда назывался Рыбинск. В 1920 году Югскую Дорофееву пустынь закрыли, 21 год спустя она была затоплена при строительстве рыбинской ГЭС.
