В выписи с переписных Ярославских книг письма и меры Ивана Головина и подьячего Никона Фёдорова 1628 и 1629 годов значится, что подворье Толгского монастыря (пл. Челюскинцев, 7) в означенных годах уже было за ним,
при коем подворье земли тогда имелось 37 сажень в длину и 31 поперёк, на подворье была деревянная церковь в честь Казанския иконы Божией Матери с приделом святого Преподобного Михаила Малеина; в разных избах жили монастырские
служители, крестьяне и бобыли".
По состоянию на 1781 год: "Церковь каменная, одна, во именование образа Толгской пресвятой Богородицы. Построена каменным строением по обету диака Ивана Казакова, собственным иждивением, в 1686 году, а кем освящена,
известия нет. Внутри стенным письмом росписана, а в алтаре и трапезе не росписано. Покрыта церковь тёсом, а глава черепицей, пол во всей оной церкви чугунный.
Колокольня каменная над папертию, вышиною в 13 трёхаршинных сажень; на ней колоколов четыре: первый в 12, второй в 7, третий в 3 и четвёртый в 1,5 пуда. Кто вкладчик принадлежащего к сей церкви места и земли, состоящих
в калашном ряду, по сгорении прежде бывшей деревянной церкви со вложенною крепостию, стал неизвестен; ныне кроме приходских людей посторонних вкладчиков никого нет". Церковь Толгской богоматери снесена была по ветхости в 1785 году.
Известно, что к началу 19 века деревянные постройки подворья находились в ветхом состоянии и поэтому принимается решение о постройке каменного здания в два этажа, которое и было построено в 1808 году. Строительные работы
выполняли нанятые мастера из крестьян, каждый выполнял работу по определённому профилю.
Как сообщали "Ярославские епархиальные ведомости" (1867 год): "Толгский монастырь в губернском городе Ярославле имеет собственное подворье, каменный двухэтажный дом с деревянными службами. Высота дома 11,5, длина 32,
ширина 15 аршин. Дом сей построен в 1808 году, по указному дозволению, вместо деревянного прежде бывшего, и покрыт листовым железом, окрашенным медянкою.
Дом Толгского подворья является одной из ранних построек в Ярославле в стиле зрелого классицизма. Двухэтажное здание r-образной формы с круглым углом
оформлено рустами, арочными нишами, треугольными сандриками, круглыми и ромбовидными филёнками. На главном фасаде — невысокий портик из четырёх пилястр с треугольным фронтоном. Завершается здание типично классическим карнизом с
мелкими модульонами.