Дом купцов Гавриловых, XIX в.