Дом Горбуновых, начало, последняя треть XIX века