Первые письменные сведения дошли до нас из описаний этого вида состязаний Гомером. По сохранившимся преданиям, покровителем кулачных боев был сам древнегреческий бог Аполлон, который победил бога войны Зевса, проявив большое искусство в ловкости и быстроте. Основоположником бокса греки считали Амыкуса, который не выпускал из своего государства ни одного чужестранца, не сразившись с ним в кулачном бою.
Завоевав Грецию, римляне продолжили Олимпийские игры, но они сильно отличались от греческих. Организация состязаний напоминала цирковое представление. Кулачные бои в Древнем Риме были превращены в зрелище для плебса и устраивались на аренах амфитеатров. Для увеличения разрушительной силы кулака применялись различные способы его вооружения. Во времена Римской империи на смену древнегреческим «филактериям» – кожаным лентам, которыми бинтовали руки, пришел «кестус» – прообраз современного кастета, а затем и чудовищный «мирмекс» – утяжеленная перчатка с шипами. Квадратная площадка для греческой пигмахии была заменена кругом, чтобы бойцы не имели возможности избегать ближнего боя. На этом и закончилась история «боя на кулаках», и на смену ему приходит «пугилистика» – тоже кулачный бой, но уже не в спортивном, а в гладиаторском смысле этого слова. И в 30 году до н. э. римляне запретили кулачные поединки между гражданами, перенеся все спортивные страсти на гладиаторские арены. В 394 году нашей эры по Указу императора Феодосия I, насаждавшего христианство, Олимпийские игры были запрещены. Спустя еще некоторое время Олимпию разрушили готы, а в 426 году по приказу Феодосия II римляне сожгли храм Зевса – центр проведения Олимпийских игр. По инициативе секретаря Спортивного Союза Франции Пьера Кубертэна в Афинах вновь был зажжен олимпийский огонь в апреле 1896 года, но на I Олимпийских играх, где участвовало 285 спортсменов из тринадцати стран, не было боксеров.
Что касается Всероссийской Олимпиады, то она так и не состоялась. Только в 1928 году была проведена Всесоюзная спартакиада с участием иностранных спортсменов.
С введением кулачного боя в Олимпийские игры, появляются и твердые правила его проведения. Участникам запрещалось прибегать к каким-либо запрещенным приемам для достижения победы, а именно: подкупать друг друга, наносить увечья. Устав запрещал участвовать в играх рабам и варварам. Для того, чтобы быть допущенным к состязаниям, свободнорожденный грек должен был представить доказательство того, что он в течение последних 10 месяцев готовился к играм, повседневно упражняясь. Помимо этого, каждый участник должен был за месяц до начала игр прибыть в Олимпию, и в течение месяца проходить испытания в олимпийской гимназии, за свой счет. Естественно, это было не под силу представителям многочисленного греческого демоса.