Ce terme puise son origine du hindi « panch » qui signifie « cinq », et ce à cause des cinq composantes de la boisson. En effet, à l'origine, le « ponch » était une boisson indienne non alcoolisée préparée à base de cinq fruits.
Victor Hugo avait un appétit digne de Gargantua. Parmi d’autres douceurs, il aimait à se réserver quelques plaisirs simples ; ainsi, il se calait les mâchoires avec des morceaux de sucre, plaçait dans sa bouche une petite orange pelée, quelques quartiers de citron et un demi-verre de rhum. Alors, il broyait le tout et cela faisait un « punch à la Victor Hugo », inattendu autant que personnel.