Nel 1920, i funzionari atletici di sei Texas HBCU - C.H. Fuller del Bishop College, Red Randolph e C.H. Patterson del Paul Quinn College, E.G. Evans, H.J. Evans e H.J. Starns del Prairie View A&M, D.C. Fuller del Texas College e G. Whitte Jordan del Wiley College - si incontrarono a Houston, Texas, per discutere di interessi comuni. In questa riunione, hanno deciso di formare una nuova lega, la SWAC.
Paul Quinn divenne il primo dei membri originali a lasciare la lega quando lo fece nel 1929. Quando la Langston University dell'Oklahoma fu ammessa alla conferenza due anni dopo, iniziò la migrazione delle istituzioni sostenute dallo stato nella SWAC. La Southern University entrò nella lega nel 1934. Arkansas AM&N entrò nel 1936 e Texas Southern University nel 1954.
Man mano che le scuole sostenute dallo stato diventavano più grandi, diventava difficile per le scuole sostenute dalla chiesa pagare le loro squadre sportive. Presto le scuole sostenute dalla chiesa iniziarono a lasciare la conferenza. Bishop si ritirò dalla conferenza nel 1956, Langston nel 1957 e Huston-Tillotson (ex Samuel Huston) nel 1959. Questo accadde un anno dopo che altre due scuole sostenute dallo stato entrarono nella lega (Grambling College e Jackson State College). Il ciclo entrata-uscita continuò nel 1961 quando il Texas College si ritirò, seguito dall'ingresso di Alcorn A&M nel 1962. Wiley lasciò nel 1968, lo stesso anno in cui entrò il Mississippi Valley State College. Arkansas AM&N uscì nel 1970 ed Alabama State University entrò nel 1982. Arkansas-Pine Bluff (ex Arkansas AM&N) rientrò nella SWAC il 1º luglio 1997, riguadagnando lo status di membro a pieno titolo un anno dopo. L'Alabama A&M University divenne il decimo membro della conferenza quando divenne membro a pieno titolo nel settembre 1999, dopo un periodo di un anno come membro affiliato SWAC.
L'attuale competizione di campionato offerta dalla SWAC include la competizione per gli uomini nel baseball, basket, cross country, football, golf, indoor track, outdoor track & field e tennis. La competizione femminile è offerta negli sport di basket, bowling, cross country, golf, indoor track, outdoor track & field, calcio, softball, tennis e pallavolo.