III olympialaiset pidettiin 1. heinäkuuta - 23. lokakuuta 1904 St. Louisissa Yhdysvalloissa. Niihin osallistui 645 urheilijaa (joista 6 oli naisia). 91 palkintopakettia pelattiin 17 urheilulajissa. On syytä huomata, että Euroopasta oli vain 53 urheilijaa, koska suurin osa heistä ei voinut tulla matkan keston ja kustannusten vuoksi. Ensimmäistä kertaa Etelä-Amerikan ja Kanadan urheilijat osallistuivat olympialaisiin. Oli vain yksi naisten kilpailu - jousiammunta.
Näistä peleistä tuli itse asiassa puhtaasti amerikkalaisia. Tämä johtuu siitä, että Yhdysvaltain joukkueessa oli melkein kymmenen kertaa enemmän urheilijoita kuin muiden osallistuvien maiden joukkueissa yhteensä. Lisäksi monet tieteenalat olivat joko keinotekoisia tai viljeltyjä vain osavaltioissa. Esimerkiksi keppi-aidat, pitkät sukellukset, kiviset ja lyacrosse-pelit. Useimmissa kilpailuissa vain amerikkalaiset osallistuivat. Tietysti tässä tilanteessa se, että Yhdysvaltain yleisurheilijoukkue voitti 22 kultamitalia 24 mahdollisesta, ei yllättä ketään.
Tämän seurauksena Yhdysvaltain joukkue otti ensimmäisen sijan epävirallisessa joukkuekilpailussa 236 mitalilla (77-81-78). Lähin "takaa-ajaja" oli Saksan maajoukkue. Saksalaiset urheilijat voittivat vain 13 mitalia (4-4-5), kun taas kuubalaiset olivat kolmannet 9 mitalilla (4-2-3).
Edustavuuden ja joukkomäärän lisäämiseksi St. Louisin olympialaisten järjestäjät yrittivät pitää ns. antropologiset päivät, joiden aikana oli tarkoitus järjestää kilpailuja "värillisille" urheilijoille. KOK: n johtaja Pierre de Coubertin piti tätä kuitenkin eräänlaisena rasistisena kiusauksena. Hän sanoi, että tämä heikentää olympialiikkeen perusmääräyksiä ja huomauttaa, että tätä ei voida hyväksyä tulevaisuudessa.
Nämä olympialaiset, kuten edellisetkin (Pariisi, 1900), olivat runsaasti erilaisia uteliaisuuksia, jotka liittyivät melko heikkoon urheilun kehitystasoon maailmassa. Esimerkiksi japanilainen napahyppääjä Savio Funi voitti baarin hyvin omaperäisellä tavalla, mutta hänen yritystään ei laskettu. Tarkoituksena oli, että hän asetti tangon pystysuoraan tangon eteen, kiipesi nopeasti sen päälle ja hyppäsi rauhallisesti baarin yli. Urheilijalle selitettiin, että juoksuhyppy on voimassa.
Seuraavassa yrityksessään japanilainen juoksi rauhassa polkua pitkin, laski sitten tangon, kiipesi uudestaan ja hyppäsi poikittaispalkin yli. Pitkästä aikaa Funi ei voinut ymmärtää, miksi hänen toista yritystään ei myöskään hyvitetty.
