Os Jogos Olímpicos de 1976 foram marcados por boicotes e acusações de drogas. Antes dos Jogos Olímpicos, a equipe de rugby da Nova Zelândia viajou pela África do Sul (ainda atolada em apartheid) e jogou contra eles. Por causa disso, grande parte do resto da África ameaçou o COI proibir a Nova Zelândia dos Jogos Olímpicos ou eles boicotariam os Jogos. Como o COI não tinha controle sobre o jogo de rugby, o COI tentou convencer os africanos a não usar as Olimpíadas como retaliação. No final, 26 países africanos boicotaram os Jogos. Além disso, Taiwan foi excluída dos Jogos, quando o Canadá não os reconheceu como a República da China.
As acusações de drogas eram galopantes nessas Olimpíadas. Embora a maioria das alegações não tenha sido comprovada, muitos atletas, especialmente as nadadoras da Alemanha Oriental, foram acusadas de usar esteróides anabolizantes. Quando Shirley Babashoff (Estados Unidos) acusou seus rivais de usar esteróides anabolizantes por causa de sua grande Com músculos e vozes profundas, um oficial da equipe da Alemanha Oriental respondeu: "Eles vieram nadar, não para cantar."
Os Jogos também foram um desastre financeiro para Quebec. Desde que Quebec construiu, construiu e construiu para os Jogos, eles gastaram a enorme quantia de US $ 2 bilhões, colocando-os em dívida por décadas. Em uma nota mais positiva, esses Jogos Olímpicos viram a ascensão da ginasta romena Nadia Comaneci, que ganhou três medalhas de ouro. Aproximadamente 6.000 atletas participaram, representando 88 países.