Старый замок находится в квартале Большая Байонна, на левом берегу Нивы. Построенная, на месте римского укрепления (castrum) в конце 11 века виконтами Лабурдана, крепость представляла собой главное защитное укрепление Байонны. По сути, сооружение состояло из шестиугольного донжона, к которому присоединялись два корпуса здания.
С 1367 года в замке находился в плену коннетабль Франции и один из выдающихся военачальников Столетний войны Бертран Дюгеклен (Bertrand du Guesclin).