Неподалеку от Античного театра, на улице rue Pourtoules, находится однонефная зальная церковь святого Флорентия, который в 6 веке был епископом Оранжа. С момента своей постройки она принадлежала монашескому ордену францисканцев, обосновавшихся в Оранже в начале 14 века и основавших там свой монастырь. Кроме того, церковь служила усыпальницей принцев из династии де Бо, которые правили Оранжским княжеством с середины 12 века до конца 14 века.
В ходе Религиозных войн протестанты в 1561 году устроили в церкви пожар, который уничтожил не только перекрытия свода, но и гробницы принцев. 18 лет спустя на месте церкви хотели построить мельницу, но вернувшиеся в Оранж монахи-францисканцы восстановили здание.
Строгость монашеского ордена францисканцев отразилась и в облике церкви. Ее парадный фасад лишен украшений, а внутри она производит мрачное впечатление из-за слабого освещения. По обе стороны нефа находятся часовни святого Гонората, Богоматери, святого Роха и святого Флорентия. В нише, расположенной в хоре церкви, установлена рака с мощами святого Флорентия.
Францисканский монастырь, который находится по соседству, был значительно перестроен в 19 веке, а окружавшие его аркады заделаны каменной кладкой. Над входными воротами монастыря установлена мастерски исполненная деревянная скульптура 17 века, изображающая двух евангелистов.