III Olimpisko spēļu diskusijas laikā Starptautiskā Olimpiskā komiteja nolēma to organizēt ASV, jo šī valsts iepriekšējos divos mačos uzrādīja labus rezultātus. Sākotnēji viņi vēlējās rīkot olimpiādi Čikāgā vai Ņujorkā, taču rezultātā izvēle krita uz mazo ostas pilsētu Sentluisu.
III izstāde Sentluisā kopā ar Parīzi notika pasaules izstādes ietvaros. Tomēr izstādes vietējā vadība neuzskatīja to par konkurentu, bet tieši pretēji, darīja visu iespējamo, lai spēles izmantotu saviem reklāmas mērķiem. Turklāt organizatori atkārtoja dažas 1900. gada Parīzes vasaras olimpisko spēļu kļūdas. Sakarā ar pievienošanos pasaules izstādei konkursi tika pārņemti uz fona, un pati olimpiāde ilga gandrīz 5 mēnešus (1904. gada 1. jūlijs - 23. novembris). Daudzas sacensības notika dažādu profesionālu organizāciju vadībā, tomēr, neskatoties uz to, tām visām tika piešķirts olimpisko disciplīnu nosaukums.
Saskaņā ar SOK, Sentluisā vasaras spēlēs piedalījās 12 valstis. Vienīgā valsts, kas pirmo reizi piedalījās konkursā, bija Dienvidāfrika. Salīdzinot ar Parīzes olimpiskajām spēlēm, dalībnieku skaits ir strauji samazinājies. 13 valstis, kas piedalījās Parīzes vasaras spēlēs, ekonomisku iemeslu dēļ nevarēja ierasties Sentluisā. Krievija, kas tajā laikā cīnījās ar Japānu, sacensībās nepiedalījās.
Kopumā III vasaras olimpiādē uzstājās 651 cilvēks, ieskaitot 6 sievietes. Viņi sacentās par 94 godalgu komplektiem 18 sporta veidos. Lielākā komanda bija Amerikas Savienotās Valstis, un tās spēlēs pārstāvēja 533 cilvēkus. Daudzos sporta veidos (bokss, cīkstēšanās, ūdenspolo, loka šaušana un teniss) bija tikai Amerikas sportisti, tāpēc spēles skaidri parādīja valsts pārākumu.
Sentluisā pirmo reizi sāka apbalvot trīs, nevis divus sportistus, kuri uzrādīja labāko rezultātu. Konkursa galvenais uzvarētājs saņēma zelta medaļu; otrās vietas sportists - sudrabs; un trešā vieta tika atzīmēta ar bronzas godalgu. Šī tradīcija ir saglabājusies līdz mūsdienām.
Neoficiālajā komandu vērtējumā iesaistītās valstis ir šādas: I vieta - ASV (78 zelta, 82 sudraba, 78 bronzas medaļas), II vieta - Vācija (4 zelta, 4 sudraba, 5 bronzas medaļas), III vieta - Kuba (4 zelts), 2 sudraba, 3 bronzas medaļas).