Folwark i cukrownia Potockich istniały w Szwagrowie już w roku 1870. W 1897 Róża Potocka wyszła za mąż za Macieja Mikołaja Radziwiłła, wnosząc w posagu rozległe dobra staszowskie. Jej herb Pilawa widnieje obok herbu Trąby na fasadzie zbudowanego na początku XX w spichlerza w Szwagrowie. Majątek ziemski wraz z zabudowaniami został po wojnie znacjonalizowany, w 1952 r przejęty przez Rolniczą Spółdzielnię Produkcyjną "ZWYCIĘSTWO"