La Porte de Notre Dame se trouve sur la place qui porte son nom. Au milieu du XVIe siècle, les habitants demandent au Prince de Condé la permission de se servir des pierres du château pour construire la porte de la place Notre Dame (1475), elle fut bâtie avec les pierres issues de l’ancienne porte du château fort.
Au XIIe siècle, le château fort s’appelait Castro Canino.
La fortification de la ville au Moyen-Age a été détruite par Louis XI après sa victoire sur Charles le Téméraire.
Inscrite par arrêté du 16 octobre 1930 et aux Monuments Historiques au XVe siècle, la Porte Notre-Dame est Propriété de la commune.