Капелла Богоматери, являющаяся частью комплекса госпиталя святого Иакова, располагается примерно в 1,5 км к северо-западу от кафедрального собора Безансона. Она была построена в середине 18 века и первоначально предназначалась для того, чтобы служить прибежищем для молодых женщин и девушек в затруднительном положении.
Строительством, продолжавшимся с 1739 по 1745 год, руководил архитектор Николя Николь. В качестве образца для подражания он взял Институт Франции в Париже и, в особенности, капеллу Коллежа четырех наций.