Os jogos olímpicos foram realizados num santuário e complexo esportivo especialmente construído no oeste do Peloponeso, chamado de Olímpia. Nunca foi uma verdadeira cidade, não possuía cidadãos ou governo, mas era um lugar próspero; com restaurantes, um salão de encontro e alojamentos. Além disso, continha enormes instalações esportivas, incluindo um estádio de 40.000 lugares, um hipódromo para corridas de cavalos e uma ginásio grande.

No centro de Olímpia existia um lugar sagrado chamado Altis. No coração dele se levantava um magnífico templo contendo uma estátua de Zeus de 12 metros feita por Fídias - uma das sete maravilhas do mundo antigo.

Ainda hoje em dia o fogo olímpico é acesso no templo de Hera em Olímpia, antes de sua viagem ao redor do mundo.