Эрмитаж, посвященный святому Антонию Падуанскому, является произведением итальянского архитектора XVIII века Филиппо Фонтана. Работа была заказана королем Карлосом IV, так как он хотел использовать ее в качестве королевской часовни во время своего пребывания в соседнем дворце во Флориде.
В качестве доказательства его важности сам король заложил первый камень в 1792 году. Простое неоклассическое здание с греческим планом этажа было завершено в 1798 году. Что делает этот храм сокровищем, так это его интерьер, особенно фрески, украшающие внутри. Они были написаны Гойей в сотрудничестве со своим учеником и другом Асенсио Хулией в период с июня по октябрь 1798 года. Благодаря стратегически расположенным зеркалам посетители могут полюбоваться чудом святого Антония Падуанского, которое произошло в родном городе святого, Лиссабоне.
Фрески на куполе демонстрируют святого и других главных фигур. Другие персонажи, представляющие жителей Мадрида как majas или chisperos, опираются на перила trompe l’oeil.
Чтобы сохранить фрески, рядом с ними в 1928 году был построен симметричный предыдущему эрмитаж, где можно было совершать богослужения, оставив оригинал в качестве музея. В 1919 году было принято решение передать тело Гойи в эрмитаж.