Le monastère des Augustins, bel exemple d’architecture gothique méridionale, est classé Monument historique. Il date pour l’essentiel des XIVe et XVe siècles (à l’exception du petit cloître classique qui fut achevé en 1626). En 1793, très peu de temps après la création du musée du Louvre, le monument accueille le musée.
Les collections du musée qui comptent aujourd’hui plus de quatre mille œuvres, se sont formées autour d’un noyau composé de saisies révolutionnaires, du fonds de l’ancienne Académie royale de peinture et de sculpture de Toulouse et des œuvres provenant des nombreux édifices religieux détruits au XIXe siècle à Toulouse, auxquels vinrent s’ajouter les dépôts des collections nationales ainsi que les acquisitions de la Ville, les legs et les dons.