1980年3月21日，为抗议苏联于1979年入侵阿富汗的行为，美国总统吉米·卡特宣布美国将抵制本届奥运会。

美国的决定得到全球50多个国家的响应，包括日本、加拿大、西德和中国。还有一些国家宣布将不会以国家代表团出席奥运会，开幕式入场以及获胜后只以奥运会会旗代替。这使得最终只有80个国家参与本届奥运会。