В деле из фонда Ярославской городской думы за 1864 год читаем лаконичное сообщение: «Городовой магистрат уведомляет Городскую думу, что недвижимое имение вдовы коллежского советника Татьяны Матвеевой
Макиной... перешло во владение жене фельдфебеля Агафьи Яковлевой Ивановой». Купчая 1860 года сообщила: муж Агафьи Яковлевны, фельдфебель Иванов, служит в ярославском военном училище.
На втором этаже дома семья Ивановых и проживёт все последующие до июля 1918 годы.
На рубеже ХХ века в Ярославле, начавшем разрастаться, домовладельцы пускали квартирантов в любое более-менее пригодное для жилья помещение. Ивановы исключением не были.
Для того и подклет в доме перестроили. Кто только здесь не жил: семинаристы и портные, канатный мастер и «нотариуса писец», офицеры квартировавших полков и чиновник.
Во время белогвардейского мятежа в 1918 году при артиллерийском обстреле города дом значительно пострадал, особенно его западная часть.
В декабре 1928 года здание и деревянная пристройка у его восточного фасада арендованы Ярославским губернским Союзом инвалидной кооперации под общежитие.