Dobra te od wieku XVI stanowiły własność szlacheckiej rodziny Zbierzchowskich herbu Grzymała. Przedstawiciele tej rodziny – wywodzącej się z ziemi łomżyńskiej – migrowali, osiadając w różnych regionach rozległej wówczas Rzeczypospolitej. Dotarli i w Grójeckie. Zbierzchowscy byli posesjonatami części Belska Dużego i wsi okolicznych. Dobra te nabył w połowie wieku XVIII stronnik króla [[Stanisław August Poniatowski|Stanisława Augusta Poniatowskiego]] i jego ekonomiczny doradca – [[Bazyli Walicki]], syn Aleksandra i Pudencjanny z domu Czosnowskiej. Nowy dziedzic Małej Wsi ożenił się z Różą z Nieborskich. Wykorzystując jej dobra posagowe, ulokował je na dobrach Mała Wieś i kilku przyległych doń folwarkach. Po zakupieniu Małej Wsi, tu właśnie – przed rokiem 1775 - Walicki zlokalizował centrum swojego majątku, zamieszkując w dość obszernym, drewnianym dworze alkierzowym Zbierzchowskich, istniejącym w tym siedlisku od XVI wieku.
