Med razpravami o vprašanju izvedbe III olimpijade se je Mednarodni olimpijski komite odločil, da jo organizira na ozemlju ZDA, saj je ta država na obeh prejšnjih igrah pokazala dobre rezultate. Sprva so hoteli organizirati olimpijske igre v Chicagu ali New Yorku, vendar je posledično izbira padla na majhno pristaniško mesto St.
III. Olimpijada v St. Louisu je skupaj z olimpijskimi igrami v Parizu potekala v okviru svetovne razstave. Vendar lokalno vodstvo razstave ni štelo za konkurenta, temveč je, nasprotno, igre na vse mogoče načine poskušalo uporabiti za lastne oglaševalske namene. Poleg tega so organizatorji ponovili nekatere napake poletnih olimpijskih iger 1900 v Parizu. Zaradi navezanosti na svetovno razstavo so bila tekmovanja potisnjena v ozadje, olimpijske igre pa so trajale skoraj 5 mesecev (1. julija - 23. novembra 1904). Številna tekmovanja so potekala pod vodstvom različnih strokovnih organizacij, kljub temu pa so vsi prejeli naslov olimpijskih disciplin.
Po podatkih MOK se je poletnih iger v St. Louisu udeležilo 12 držav. Edina država, ki se je tekmovanja udeležila prvič, je bila Južna Afrika. Število sodelujočih držav se je v primerjavi z olimpijskimi igrami v Parizu močno zmanjšalo. 13 držav, ki so sodelovale na poletnih pariških igrah, zaradi ekonomskih razlogov ni moglo priti v St. Rusija, ki je bila takrat v vojni z Japonsko, tekmovanja ni sodelovala.
III. Poletnih olimpijskih iger se je udeležilo 651 ljudi, od tega 6 žensk. Tekmovali so za 94 sklopov nagrad v 18 športih. Najštevilčnejša je bila ekipa Združenih držav Amerike, na igrah so zastopali 533 ljudi. V številnih športih (boks, rokoborba, vaterpolo, lokostrelstvo in tenis) so nastopali le ameriški športniki, zato so igre jasno pokazale premoč države.
V St. Louisu so prvič začeli podeljevati tri, ne dva športnika, ki sta pokazala najboljši rezultat. Glavni zmagovalec tekmovanja je prejel zlato medaljo; športnik, ki je zasedel drugo mesto - srebro; tretje mesto pa je prejelo bronasto medaljo. Ta tradicija se je ohranila do danes.
V neuradnem ekipnem tekmovanju so se sodelujoče države postavile takole: I mesto - ZDA (78 zlatih, 82 srebrnih, 78 bronastih medalj), II mesto - Nemčija (4 zlate, 4 srebrne, 5 bronastih medalj), III mesto - Kuba (4 zlate, 2 srebrni, 3 bronaste medalje).
