Vaikka samanlainen pallopeli mainitaan jopa antiikin runoissa, käsipallon viralliseksi syntymävuodeksi katsotaan 1898. Sitten joukkuekilpailu, jossa käytettiin melkein nykyaikaisia sääntöjä, sisällytettiin yhden Tanskan koulun liikuntaohjelmaan. Tanskalaisille hyvitetään myös ajatus pelaamisesta kädellä pallolla ja maalilla - tämän maan pelaajat käyttivät sitä pitämään kunnossa talvella.
Käsipallo esiintyi ensimmäisen kerran olympialaisten ohjelmassa viimeisissä kesän peleissä ennen toisen maailmansodan alkua. Yhdentoista pelaajan joukkueet pelasivat Berliinissä, ja kotijoukkue voitti turnauksen. Tämä urheilu palasi olympiaurheilulomalle vasta 36 vuotta myöhemmin. Ja tämä tapahtui jälleen Saksassa - Münchenissä kilpailivat miesten joukkueet, jotka muodostivat nykyaikaisten sääntöjen mukaisesti 7 pelaajaa. Sitten voittajaksi tuli Jugoslavian maajoukkue. Jo seuraavissa olympialaisissa Montrealissa, Kanadassa, naisten käsipalloturnaus lisättiin miesten käsipalloturnaukseen. Tuona vuonna Neuvostoliiton joukkueet osoittautuivat kilpailijoita vahvemmiksi sekä naisten että miesten kilpailussa.
Neuvostoliiton naisjoukkue voitti seuraavan olympiaturnauksen vuonna 1980 Moskovassa, ja Neuvostoliiton joukkueet voittivat kultamitalit neljä kertaa ja tulivat kerran hopea- ja pronssimitalisteiksi. Tämä on paras indikaattori kaikista olympiakisaturnauksiin osallistuvista maista. Neuvostoliiton olemassaolon päättymisen jälkeen voittoisaa perinnettä jatkoivat ensin joukkueet, jotka koostuivat entisten Neuvostoliiton tasavaltojen pelaajista - kukin voitti yhden kultamitalin ja yhden pronssimitalin. Sitten Venäjän maajoukkueet, jotka voittivat yhden mitalin jokaisesta listasta, pelasivat melko menestyksekkäästi kesäpeleissä.
Muun maan joukossa korkeimmat tulokset saavutti Jugoslavia, joka on voittanut olympialaisista viisi eri nimellisarvoista mitalia. Tämän valtion romahtamisen jälkeen yksi entisistä tasavalloista jatkoi perinteitään - Kroatian maajoukkueet lisäsivät luetteloon vielä kaksi kultapalkintoa. Sekä Venäjällä että Kroatialla on kaikki mahdollisuudet täydentää säästöpossujaan Lontoon XXX kesäolympialaisten mitaleilla - näiden maiden miesten ja naisten käsipallojoukkueet ovat saaneet oikeuden osallistua vuoden 2012 turnauksiin.