Le musée Granet est situé dans le quartier Mazarin au cœur du secteur sauvegardé de la ville. Il s’est agrandi plusieurs fois au cours du XIXe et au début du XXe siècle pour recevoir de nouvelles donations, celles de François-Marius Granet, de Bourguignon de Fabregoule et de Fernand Dol.

Cependant, à partir des années 40, les bâtiments commencent à se détériorer et, malgré cela, seul l’ancien prieuré du palais de Malte fait l’objet de rénovations à la fin des années 70.

Afin de rendre aux collections l’espace qu'elles méritent mais aussi de répondre aux nouveaux enjeux qui sont ceux d’un musée moderne, la conservation en association avec la Direction des musées de France a travaillé à l’élaboration d’un projet culturel et muséographique pour faire du musée Granet un pôle vivant et attractif au plan local comme au plan national.

Les travaux de réaménagement se sont effectués entre 2000 et 2005. Le nouveau musée s’intègre ainsi dans le patrimoine architectural chargé d’histoire de la ville tout en répondant aux exigences les plus modernes de ce type de structure.

En effet, outre de nouvelles salles et de nouveaux éclairages dédiés à l’exposition des œuvres, le musée s’est enrichi de nombreux espaces destinés à l’accueil et à l’accompagnement des visiteurs : des ateliers pédagogiques destinés aux jeunes, des salles de conférences et de concerts. Pour parfaire l’accueil des visiteurs dans une exigence de sérieux, mais aussi de convivialité, le musée s’est doté d’une librairie et d'une cafétéria.