Дом Старичкова, XIX век