Одной из наиболее значительных средневековых построек Агридженто считается замок, находящийся около так называемого холма Джирдженти – на месте средневекового городского центра Агридженто.
По данным археологических исследований основание замка Агридженто относится ко второй половине 11 века. Существует документ от 1087 года, который свидетельствует о том, что король Рожер приказал возвести вокруг только что завоеванного им города Джирдженти (средневековое название Агридженто) крепость, укрепленную башнями и другими сооружениями. Известно, что крепость эта была достаточно мощной, так как в середине 12 века один арабский писатель охарактеризовал ее как «высокую и прочную скалу». Рисунок на одной из страниц ренессансного трактата, посвященного крепостям королевства Сицилии, на котором изображены военные укрепления Агридженто, свидетельствует о том, что город был обнесен мощными крепостными стенами с многочисленными башнями и воротами, образуя настоящий средневековый замок. К сожалению, этот рисунок является сейчас единственным свидетельством о замке – часть военных сооружений была разрушена во время восстания 1715 года, а в последующие века постепенно исчезло и остальное, пока в 1909 на месте замка не устроили городской резервуар.