Durant le moyen âge, Sepx faisait partie de l'abbaye de Bonnefont.
Des crises démographiques touchent le village au XVIIè mais il compte
encore à la veille de la révolution 330 habitants. Le village connaît son
maximum de population, 627 habitants, en 1846 avant que l'exode
rural n'amène un dépeuplement caractéristique.

Le mur de l'enceinte de l'abbaye cistercienne de Bonnefont (XIIè) est
constitué de petites pierres calcaires non taillées liées à la chaux. On
le trouve sur le territoire de la commune à proximité de l'abbaye.

L'église Notre Dame de l'Assomption (XIVè et XIXè), a été remaniée au
XIXè : surélévation, nouvelles ouvertures et emmurement de la porte
d'entrée gothique originelle. Son clocher fortifié (XV et XVIè) triangulaire
avec deux tours crénelées porte le blason de la famille Mauléon à
laquelle appartiennent les abbés de l'abbaye de Bonnefont.

L'église possède un magnifique orgue médiaphone (1898, Dumont et
Lelièvre).

Le calvaire (route de Saint Gaudens) aurait été érigé en 1901 par un
habitant pour expier une vie de mendicité.