Небольшой усадебный дом, называвшийся "охотничий замок", существовал во времена К.Г.Разумовского. Дом был уничтожен во время Великой Отечественной войны. Воссоздание его было ззапланировано после отрытия в усадьбе музея А.К.Толстого. Проект был разработан брянским архитетором В;Н.Городковым в 1960-х годах, осуществлён только в 1988-1993 годах при поддержке Н.М.Грибачёва, писателя и государственного деятеля, уроженца Брянщины.