Fondé en 1922, le SU Agen Football est l’un des clubs historiques du football en Lot-et-Garonne. La section football du Sporting Union Agenais constitue alors la première équipe de football créée à Agen. Les débuts sont toutefois rapidement perturbés par une cohabitation difficile avec la section rugby du club omnisports. Dès 1923, les footballeurs quittent ainsi le SU Agen pour rejoindre le Véloce-Club Agenais, mettant provisoirement fin à l’aventure du football au sein du SUA. Après plusieurs décennies marquées par différentes expériences du football agenais, une nouvelle section football du SU Agen voit finalement le jour en 1959, donnant naissance à la structure qui perdure aujourd’hui.
Le renouveau du SU Agen Football s’accompagne rapidement d’une progression dans la hiérarchie régionale. En 1963, l’arrivée de l’ancien professionnel René Sergent au poste d’entraîneur-joueur contribue à faire franchir un premier cap au club, qui accède à la Promotion d’Honneur. La formation occupe également une place importante dans le développement du SUA, notamment sous l’impulsion de Pierre Fernandez, nommé entraîneur de l’équipe première en 1969. La même année, les Agenais atteignent la Division d’Honneur, avant de remporter leur premier titre régional en 1975. Cette performance leur ouvre pour la première fois les portes du championnat de France de Division 3, marquant la première apparition du club dans une compétition nationale.
Cette première expérience au niveau national est difficile et se conclut par une relégation après une seule saison en Division 3. Le SU Agen Football réagit toutefois rapidement et décroche un deuxième titre de champion régional en 1977, synonyme de retour en Division 3. Cette fois, les Agenais parviennent à se maintenir durant deux saisons, de 1977 à 1979. Le club connaît ensuite plusieurs passages dans les divisions nationales et régionales, alternant les périodes de stabilité et de reconstruction. Cette histoire permet au SUA de s’affirmer durablement comme l’une des formations majeures du football agenais et lot-et-garonnais.
Après plusieurs années au niveau régional, le SU Agen retrouve les championnats nationaux en 2006 grâce à un nouveau titre de champion d’Aquitaine. Le club accède alors au CFA2, aujourd’hui appelé National 3, et s’y maintient. Cette période est également marquée par de belles performances en Coupe de France. Lors de la saison 2009-2010, le SUA atteint les 16es de finale, où il s’incline face à l’AS Beauvais Oise (3-0). La saison suivante, les Agenais rééditent cette performance et affrontent cette fois le Paris Saint-Germain au stade du Parc Municipal des Sports, le 23 janvier 2011. Cette rencontre face au club parisien constitue l’un des moments les plus marquants de l’histoire récente du football agenais.
Depuis, le SU Agen Football a connu un nouveau cycle de reconstruction au niveau régional. Après plusieurs saisons loin des championnats nationaux, le club a progressivement retrouvé de l’ambition et s’est notamment appuyé sur son travail de formation et son important ancrage local. Le club poursuit son développement autour de ses équipes seniors, féminines et de jeunes. Avec plus d’un siècle d’histoire, le SU Agen Football demeure ainsi un acteur historique du football en Lot-et-Garonne.