Lá cờ năm vòng tròn đã được thiết kế năm 1913, theo ý kiến của Chủ tịch Uỷ ban Olympic Quốc tế, ông Cubectanh. Năm 1914, nó đã được sử dụng lần đầu tiên tại Đại hội Đại biểu Olympic cử hành ở Paris, nước Pháp. Lá cờ Olympic làm bằng vải màu trắng không viền, thêu năm vòng tròn với ba vòng bên trên màu xanh, đen, đỏ, còn hai vòng bên dưới màu vàng và màu lục, lần lượt xếp từ trái sang phải.
Ông Cubectanh đã chọn năm màu này vì đây là màu quốc kỳ của các nước tham gia cuộc vận động Olympic thời bấy giờ.
Về sau ngời ta lại có một cách giải thích khác về màu sắc của năm cái vòng, cho rằng năm cái vòng này tượng trưng cho năm lục địa trên thế giới: màu xanh tượng trưng cho châu Âu, màu vàng tượng trưng cho châu Á, màu đen tượng trưng cho châu Phi, màu lục tượng trưng cho châu Đại Dương, còn màu đỏ tượng trưng cho châu Mỹ.
Vì tính rằng người ta có thể có những cách giải thích khác nhau về lá cờ năm cái vòng, cho nên năm 1979 tờ tạp chí Olympic, Uỷ ban Olympic Quốc tế đã chính thức nêu rõ rằng dựa theo hiến chương Olympic, ý nghĩa của năm cái vòng này là tượng trưng cho sự đoàn kết giữa năm lục địa, đồng thời tượng trưng cho tinh thần thi đua công bằng thẳng thắn và hữu nghị giữa các vận động viên toàn thể thế giới đến tập trung tại Thế vận hội Olympic.
Bắt đầu Thế vận hội Olympic lần thứ 7, khi khai mạc Thế vận hội Olympic, bao giờ cũng cử hành nghi thức đại biểu thành phố chủ nhà của Thế vận hội lần này đem lá cờ Olympic trao cho thị trưởng thành phố tổ chức Thế vận hội Olympic lần sau. Tiếp đó thành phố này sẽ giữ lá cờ tại phòng chính của toà thị chính, rồi bốn năm sau sẽ lại cử hành một nghi thức như thế.