1906. aastal, 10 aastat pärast Ateena esimesi olümpiamänge, korraldati erakorraline, kaalumata olümpia. Kreeka otsus seda alguses korraldada põhjustas mõnede olümpiakomiteede teravat kriitikat. Järk-järgult muutus nende arvamus paremuse poole seetõttu, et paljud riigid olid tee maksumuse tõttu paljudes riikides võimatud saata tõsiseid meeskondi St. Louis'sse või ei osalenud isegi 1904. aasta mängudel.
Rahvusvaheliste messide varju ajendatud olümpiamängud kogesid pikaleveninud kriisi. Selle olukorra taustal lubati kreeklastel kui iidse Kreeka kultuuri kaitsjatel pidada olümpiaadi. Hoolimata asjaolust, et Ateena olümpiamängud 1906. aastal oli esimene ja ainus sedalaadi üritus ning selle tulemusi ei tunnustatud ametlikena, said korraldajad ülesande täita: hingata närbunud projektile elu.
Kreeka foorum, erinevalt kahest ametlikust eelkäijast, polnud ajaliselt väga pikenenud ja õnnestus saada kogu maailmas toimuvaks ürituseks, koondades võistlusteks nende aegade rekordilise publiku - 884 sportlast, kes esindasid 20 riiki.
Esmakordselt mängude ajaloos läbisid kõik osalejad registreerimise riigi olümpiakomiteedes. Samuti jälgisid vaatajad esimest korda mängude ava- ja lõputseremooniaid, olümpiaparaadi ja riiklike plakatite tõusu võitjate auks stendide kohal.
Kurioossed on faktid, mis on otseselt seotud 1906. aasta olümpiamängudel osalejatega. Mezhimpiadis osalenud kaheksakordne olümpiavõitja Ray Urey võitis kaugushüppe kohalt (3 m 30 cm) ja kaugushüppe kohalt (1 m 56 cm). Kui neid tulemusi arvesse võetaks, oleks ta kullas (9 kuldmedalit) edestanud Paavo Nurmi ja Karl Lewist. Ray Ureyl ei lubatud 1912. aastal enam Stockholmi olümpiamängudel osalemist, kuna ta oli 39-aastane.
USAst jooksja Paul Pilgrim võitis kaks distantsi - 400 ja 800 meetrit. Seda tulemust kordas sportlane Alberto Juantorena alles 70 aasta pärast Montreali olümpial.
Kanada jooksja Billy Schering saabus Kreekasse kaks kuud enne mänge, et kohaneda kohalike oludega. Tema pingutused polnud asjatud, ta võitis ootamatult kõigi jaoks maratoni. Kreeka kroonprints Georg ja Schering viisid staadioni lõppvooru.
1906. aasta olümpiaadide mängudel esinesid Soome sportlased esimest korda ja võitsid kohe kulla. Werner Järvinen sai antiigi stiilis ketta viskamise eest medali.
Kõige rohkem auhindu olümpial võitis iirlasest ameeriklane Martin Sheridan. Ta sai kulla löögi ja kettaheite eest klassikalises stiilis. Pikkade ja kõrgete hüpete eest kohalt sai ta hõbeda. Kreeka kuningas esitas Sheridanile võitja oda, mida hoitakse endiselt sportlase kodumaal Iirimaal.