Die Anlage, eine der größten Burgen der Provence, wurde ab dem 10. Jh. auf dem Rocher du Puech von den Römisch-deutschen Kaisern errichtet (Empéri ist die provenzalische Bezeichnung für Kaiserreich). Vom 13. bis 15. Jh. war sie die Lieblingsresidenz der Erzbischöfe von Arles. Heute befindet sich hier das Musée de l'Empéri, ein Museum für Kunst und Militärgeschichte mit einer der bedeutendsten Sammlungen an französischen Uniformen sowie Fahnen, Orden, Blank- und Feuerwaffen, Kanonen, Gemälden usw.