Cette porte des anciens remparts d'Arles doit son nom au quartier qu'elle desservait, depuis le Moyen Âge : le quartier du Bourg-neuf, initialement possession de la famille des Baux, ou étaient installés les Templiers (vers 1140).
La porte de la Cavalerie date du XIIIe siècle. Elle fut rebâtie au XVIe siècle puis réhabilitée au XVIIIe siècle.
Le quartier d'Arles de la Cavalerie, appelé autrefois le Bourg-Neuf, se situe au Nord du centre-ville. Il date du XIe siècle, lorsque la ville a commencé à se développer hors de son enceinte du Haut Moyen Âge. Deuxième extension urbaine après le Vieux-Bourg, il a pris bien naturellement le nom de Bourg-Neuf. Le nom de Cavalerie, plus tardif, évoque la présence des Chevaliers du Temple (Templiers) installés dans ce quartier.
