Усадьба купца Тимофея Васильевича Чистова сформировалась во второй четверти XIX века. Главный дом усадьбы - один из самых красивых и известных памятников классицизма на Верхней Волге. В 1866 г. здесь купец принимал будущего императора Александра III. Его наследники в 1870-х гг. продали главный дом под городскую больницу, а сами жили во флигелях. В 1991 году после реставрации особняк был передан Опочининской библиотеке. Эта библитека, созданная в 1875 году предводителем дворянства Ф.К.Опочининым была первой в Ярославской губернии.