第一届奥运会邮票一经问世,马上被人们接受和热衷收藏。 1906 年希腊为纪念在雅典举办第一届奥运会又发行一套14 枚纪念邮票。第 2 届至第 6 届均没奥运会邮票问世。 1927 年比利时为第 7 届奥运会发行一套 3 枚纪念邮票。以后每一届奥运会主办国均为本届奥运会主办国均为本届奥运会发行邮票。 1924 年乌拉圭为庆祝本国足球队获第 8 届奥运会足球赛冠军,特发行 3 枚一套邮票,为非主办国发行的第一套奥运会邮票,也是第一套足球邮票。后来,有越来越多的国家和地区发行奥运会和其他体育大赛的邮票。第二次世界大战之后,奥林匹克体育邮票更是逐年增多。
1992 年一年,世界各国仅发行奥运会邮票就达 1200 多枚。丰富的体育邮票必然吸引了众多的收藏者。有关体育邮戳,特别是纪念邮戳也是集邮者主要的收藏品。 1912 年第 5 届奥运会在雅典斯德哥尔摩举行,瑞典邮政部门在该市和哥德堡启用二种奥运会宣传邮戳和一种特殊的手指戳。从此开创了奥林匹克体育纪念邮戳普遍使用的先例。不仅主办国起用奥运会纪念和宣传邮戳,而且非主办国在发行邮戳时也启用相同纪念邮戳。奥运会和体育的纪念邮戳、宣传戳限于某段时间内使用,具有特殊邮政意义,同样吸引着体育集邮者。体育集邮就是收集、整理、研究和展示体育邮票及相关邮政品的专项性的集邮。体育集邮经历了从简单自发到多样全面正规的发展过程。
最初人们只是对体育邮票、纪念邮戳和其他邮品处于自然状态的收集。 1925 年开始,有人才对此做专项性的收集。在 1925 —— 1953 年任国际奥委会委员、 1935 年—— 1952 年任执委的艾伯特 . 伯纳考萨积极倡导奥林匹克体育集邮,鼓励人们致力于这一专项性的集邮。第二次世界大战后,奥林匹克体育集邮在一些国家迅速展开,1947 年在法国出版了第一种体育邮票目录; 1951 年在巴萨罗纳举办了全国性体育邮票展览; 1952 年在罗马第一次举办国际性的体育展览。在这时期,人们主要是收集体育邮票和相应的邮品。
在集邮领域中逐步形成了多种类的有研究的收藏。在体育集邮中最早出现的是传统集邮类,即对体育邮票按国别、历史阶段和发行顺序来收集和研究。其中主要是希腊的第一届奥运会和 1906 年届间奥运会邮票。并且有人编组出这类邮票的传统类邮集。
后来随着集邮领域内专题类集邮的兴起和发展,许多人投入了体育的专题集邮。集邮者用体育邮票和其他邮品上的图案和文字及发行目的来表达相应的体育主题内容,出现了较多的体育专题邮集。
1968 年后在欧洲某些国家还出现用体育邮品与历史文物资料同时编排的邮集,主要是反映第一届奥运会至 1906年希腊届间奥运会兼奥运会间复兴现代奥运会过程。这是种特殊的编排方式,不广泛使用。在这时期出现了大量的专题类邮集、少量邮政史类、航空类和极限类,保留了一定的传统类体育邮集。
1980 年萨马兰奇任国际奥委会主席,积极主张奥林匹克体育与文化艺术的集合,主张加强体育收藏。 1982 年在他倡导下,由国际奥委会组织成立了国际奥林匹克集邮联合会(缩写 FIPO), 指导各国开展体育集邮。在该协会组织下,举办了 6 届世界性的奥林匹克集邮展览,其中有 3 届分别在第 24 届到第 26 届奥运会期间举办。从那之后体育集邮展览便进入了奥运会间的文化活动。 1986 年成立的中国体育集邮协会是国际奥林匹克集邮联合会第一批成员。在我国也曾举办过一届国际性体育邮展、 2 届奥林匹克邮票展览和 4 届全国体育邮展。
在第一届到第五届国际奥林匹克邮展中,参观邮票基本上均以专题类对待,实际上并不完善。因此从第 6 届(在 1996 年亚特兰大奥运会期间)起,体育集邮完全按照国际集邮联合会的展览规则,明确规定体育集邮分类有:传统类、专题类、邮政史类、邮政用品类、航空类、极限类、现代类等。这是从集邮类别上来分。由于体育有广泛的内容、那么从集邮主题内容来分又为:夏季奥运会、冬季奥运会、洲际运动会、全国运动会、世界锦标赛、世界杯赛、国际大赛、各项体育运动(如:足球、篮球、排球、体操、滑雪、滑冰......) 国际奥委会、各国奥运会、民族民间体育等等。