Здание рабочих казарм, XIX в.