Гостиница Эрмитаж, XIX в.