Здание, расположенное в областной столице на улице Чернышевского, 56, было построено еще 1840 году. Изначально дом принадлежал помещику Ивану Груздеву. В дальнейшем постройку много раз перепродавали и закладывали. Последним владельцем был купец Иван Немирова. Его имя носит дом до сих пор. Здание является объектом культурного наследия. 
Дальнейшая судьба дома весьма разноплановая. Здесь размещалось училище для мальчиков из «низших сословий», была организована коммунальная квартира.
В 2019 году реставраторы начали восстанавливать здание на средства нового владельца, мецената из Великого Устюга. Специалисты сохранили около 60% родных материалов строения. В ходе работ обнаружилось, что когда-то дом имел балконы. Один такой удалось воссоздать. Зданию вернули изначальный цвет, сохранили старые дверные колоды и полы. При реставрации лестницы использованы «родные» поручни. 
Сейчас на первом этаже для посетителей открыт музей-бар. В интерьере заведения сохранена старина. В помещениях стоит мебель XIX века. На стенах висят старинные фотографии, открытки, предметы крестьянского быта. Также посетителей заинтересует коллекция старых телефонов. Сообщает ИА «СеверИнфо».