Cette porte était la principale entrée de la ville car elle donnait sur les quais. L'ancienne porte a été détruite et a été remplacée par une nouvelle construite en 1495 en l'honneur de la victoire de Charles VIII à la bataille de Fornoue.

Elle est haute de 35 mètres. La porte tient vraisemblablement son nom des cailloux de la Garonne. Mais certains penchent pour le nom d'une famille ayant fourni plusieurs maires à Bordeaux.