Усадьба включает в себя главный дом и хозяйственный флигель, который был утрачен после 1981 года.
Главный дом усадьбы расположен в центре города, на бывшей Садовой улице, застройка которой каменными зданиями велась в начале XIX века.
Первоначальный объем здания был выстроен во 2-й трети XIX века. В 1836 году на месте существующего здания еще находился деревянный дом, принадлежавший калужскому мещанину Михаилу Ивановичу Волокову. Именно М.И. Волоков и выступил застройщиком ныне существующего главного дома усадьбы.
Впоследствии, вплоть до 1920-х гг. домовладение оставалось в семье Волоковых. Так, по смерти отца недвижимость унаследовал Иван Михайлович Волоков, имевший уже статус купца. По-видимому, к этому времени уже была возведена пристройка к восточному фасаду первоначального объема, в которой размещались лестничная клетка и ретирада.
В начале ХХ века усадьба принадлежала купчихе Волоковой Вере Александровне, у которой была муниципализирована в начале 1920-х годов. Затем постройки усадьбы перешли в ведение Горжилуправления. В настоящее время используется различными организациями.