Le Musée a été aménagé dans les anciens pavillons érigés sous le règne du Sultan Moulay Ismaïl (1672-1727) pour lui servir de lieu de séjour à Rabat. Par son architecture, son décor, son jardin, le bâtiment constitue à lui-seul un chef-d’oeuvre.