Здание Секретариата - одно из самых старых сооружений Панаджи, является резиденцией Законодательного собрания штата Гоа. Когда-то это здание принадлежало султану Биржапуру Юсуфу Шаху и являлось его дворцом. В 1615 г. Португальцы основательно перестроили его, превратив в путевой дворец генерал-губернаторов и вице-королей, которые обычно ночевали в нем по дороге из Старого Гоа в Старый Свет или обратно.
После того как Старый Гоа передал роль столицы Панаджи, дворец Идалкаон ("Дворец Адил-шаха") в 1760 г. становится официальной резиденцией вице-королей и является таковым вплоть до 1918 г. Прежнее исламское сооружение перестраивается в колониальное - с черепичной крышей и деревянными верандами. Эмблемы Ашока Чакра и Колесо Дхармы ("Закона") заменяются гербом португальских вице-королей. К западу от Секретариата расположена небезизвестная статуя аббата Фариа.
К востоку от Секретариата стоит памятник аббату Фариа.