Основната сграда на двореца на Кралската академия за изящни изкуства Сан Фернандо, се намира на една от централните улици на Мадрид. Тази сграда е построена в стил барок през 1689 г. по проект на известния испански архитект Хосе де Бенито Чурригера. В 1774 г., архитект на Диего де Вийянуэва въведени малки промени по фасадата на сградата, премахване на някои декоративни елементи в стил барок.

12 април 1752 година, според указ на цар Фердинанд VI в тази сграда е основана Художествена академия, която първоначално е била наречена "Кралска академия на три благородните изкуства, кръстен на свети Фердинанд". В продължение на дълго време тук преподавались архитектура, живопис и скулптура. От 1873 година в академията започнаха да преподава музика, и тя е преименувана в Кралската академия за изящни изкуства Сан Фернандо. От 1987 г. в Академията се отвори клон на фотографията, кинематографията, телевизията. Тук също се намира седалище Мадрид академия на изкуствата.

При Академия на открит музей, в който са пуснати голям брой изключителни произведения на изкуството. Тук можете да видите работата на Франческо Гоя, Рубенс, Хуан де Zurbaran, Висенте Лопес Портана, Серано, Арчимбольдо, Пикасо, Дали. Също така тук има изложба на скулптури, по-голямата част от които се отнасят до 18-ти век.

За историята на своето съществуване Кралската академия бе под ръководството на различни дейци на изкуството, сред които Af Гоя, сред нейните възпитаници и доста известни имена – на Пабло Пикасо и Антонио Лопес Гарсия, Салвадор Дали и др.