С усадьбой связано имя Александра Сергеевича Пушкина. В двух километрах отсюда находилось имение Ганнибалов - Захарово, в котором поэт провёл своё детство. В 1807 году у местного храма был похоронен младший брат поэта - Николай Пушкин, умерший в возрасте шести лет. Сам Александр со своей бабушкой, Марией Алексеевной Ганнибал, и с сестрой Ольгой ходил в детстве в Вязёмскую церковь из соседнего именья Захарово, где не было своей церкви. Здесь, в усадьбе, на одном из балов, Пушкин впервые увидел Наталью Николаевну Гончарову, свою будущую жену.