O Brasil ficou de fora das edições das Olimpíadas de 1896, 1900, 1904, 1908, 1912 e 1928, conforme o Comitê Olímpico Internacional (COI). A falta de um comitê nacional, criado somente em 1914, impossibilitou que os atletas brasileiros participassem dos Jogos.
Na época das Olimpíadas de 1896 a 1912, o país enfrentava desafios internos que incluíam dificuldades financeiras e ausência de uma infraestrutura esportiva. O Comitê Olímpico do Brasil (COB) foi criado apenas em 8 de junho de 1914, mas, durante a Primeira Guerra Mundial, os Jogos Olímpicos de 1916, programados para Berlim, foram cancelados.
A trajetória olímpica brasileira começou apenas em 1920 e a última ausência do Brasil ocorreu em 1928, nos Jogos de Amsterdã. Embora o país tivesse feito sua estreia nos Jogos de 1920 e participado em 1924, a crise econômica e a falta de apoio governamental impediram a participação em 1928.
Somente em 1932, nos Jogos de Los Angeles, o Brasil voltou a marcar presença, e desde então tem participado de todas as edições dos Jogos Olímpicos.