Zespół Gwardii na boiskach B klasy spisywał się rewelacyjnie m.in. 6:0 z Naprzodem Poznań, pozwoliło to awansować do półfinału w walce o A klasę. Ostatecznie jednak Gwardia przegrała finał z Legią Poznań. W 1954 roku powstał MZS Start Koło z sekcją piłkarską i bokserską. W 1955 roku Start awansował do A klasy. W tym samym roku przywrócono nazwę Olimpia. Rozegrano mecz towarzyski z Legią Warszawa, wynik 8:2 dla piłkarzy ze stolicy. W 1956 roku obie kolskie drużyny połączyły się i nazywały się ZS Start–Olimpia Koło. Debiut w A klasie jednak nie był udany dla Olimpii. W 20 meczach zdobyła 18 punktów i została zdegradowana do B klasy. thumb|250px|Trybuna główna stadionu w Kole Rok 1959 był o wiele lepszy od poprzednich Olimpia wygrała większość meczów i grała w barażach o III ligę z Victorią Jarocin. Dwumecz nie przyniósł rozstrzygnięcia, w dodatkowym meczu rozegranym 25 października we Wrześni, 2:1 wygrała drużyna z Koła. W sezonie 1960 w trzecioligowym debiucie przegrała w Kościanie z Obrą 4:2. Sezon zakończyła na ostatnim miejscu co oznaczało spadek do A klasy. Wydział Gier i Dyscypliny dowiedział się o przewinieniu regulaminowym kolskich działaczy i wystawieniu do gry nieuprawnionego zawodnika i Olimpia została zdegradowana do B klasy.