W części Rybna Koszutskich, zwanej Rybno Małe przed 1579 rokiem istniał dwór, o który toczył się spór i nastąpiła ugoda między Maciejem a Wojciechem Koszutskimi. W 1626 roku część Rybna nabył Krzysztof z Budzisławia Wysocki, kasztelan brzeski i starosta gnieźnieński za 12000 zł od Andrzeja Niemojewskiego. Od 1632 roku część Rybna Koszutskich nabył Andrzej Gędecki, syn Jakuba. W 1660 roku Rybno przez rok było zastawem za 5000 zł u Krzysztofa Czarneckiego. W 1704 Marcella z Dembian, wdowa po Wojciechu Chrąstowskim, kasztelanie nakielskim podpisała kontrakt rocznej dzierżawy Rybna. Od 1728 roku współwłaścicielem miejscowości był Maciej Gorecki. W 1777 roku sędzia ziemski gnieźnieński, dziedzic miasta Kiszkowa i wsi Rybno podpisał ugodę graniczną z Janem Zaydlicem i Zygmuntem Dziembowskim. W 1782 roku odbyło się w Rybnie wesele starosty Aleksandra Moszczyńskiego z Marianną Radzimińską, dziedziczką większej części miejscowości. Świadkował podczaszy Ignacy Moszczyński. W 1793 roku swój dwór w Rybnie mieli także Poklękowscy. W 1800 roku zmarł w Rybnie 37 letni łowczy dworski, Franciszek Poklękowski. W tym czasie ekonomem był Józef Ozdowski. W 1803 roku przebywający w Rybnie biskup cambizopolitański, ks. Franciszek Olędzki zmarł w wieku 73 lat.