Klub sportowy SS La Fermo został założony w miejscowości Fermo w 1920 roku. Początkowo zespół występował w lokalnych turniejach towarzyskich. W 1923 roku, po walnym zebraniu członków klubu, doszło do rozłamu, wskutek czego powstał Fermo FC. W następnym 1924 roku oba kluby połączyły się w US Fermana. W latach 1925–1930 drużyna rozgrywała tylko mecze towarzyskie, a następnie w 1930 roku klub dołączył do FIGC i w sezonie 1930/31 debiutował w Seconda Divisione Marche-Umbria-Abruzzo (D4). W sezonie 1931/32 z powodu zaległości finansowych klub po 16 kolejce został wykluczony z Seconda Divisione Marche, ale wkrótce odrodził się pod nową nazwą Polisportiva Fermana i kontynuował grę w Seconda Divisione Marche, awansując do Prima Divisione. W sezonie 1935/36 jako trzeci poziom została wprowadzona Serie C, a klub został zakwalifikowany do niej. Sezon 1935/36 zespół zakończył na 14.pozycji w grupie D Serie C i został zdegradowany do Prima Divisione, ale z powodu problemów finansowych klub został rozwiązany.
W 1937 klub został odrodzony jako GIL Fermo i w sezonie 1937/38 startował w Seconda Divisione Marche. W 1939 klub został promowany do Prima Divisione, po czym wrócił do nazwy US Fermana.