Le nouveau conservatoire de musique, danse et théâtre du Grand Avignon occupe l’emplacement d’une livrée cardinalice qui au XIVème siècle, s’étendait jusqu’à la rue du Chapeau-Rouge.
La maison de l’Auditeur général de la Chambre apostolique, juge en première instance tant au civil qu’au militaire, était enclavée dans cette livrée. Elle fut la demeure de Jean de Neuchatel, évêque de Toul, promu cardinal en 1363 et décédé le 4 octobre 1398, puis celle de Pietro Blavi (ou Pierre Blau en français), docteur en décrets et référendaire apostolique, promu en 1395, qui décéda le 12 décembre 1409.
Elle sera vendue à la famille Puget de Chasteuil puis achetée vers 1640 par les Célestes de Dôle (Jura) pour fonder le couvent d’Avignon. Cette congrégation de religieuses d’origine gênoise étaient dites Célestes à cause du scapulaire et du manteau bleu ciel qu’elles portaient sur leur robes blanches.
Elles firent construire leur monastère sur l’emplacement de l’immeuble acquis. Ruinées par la banquroute de LAW, elles demandent à Benoît XIV la suppression de leur couvent et leur translation dans d’autres communautés. Elles quittèrent le monastère le 10 mai 1752 et se dispersèrent dans différents couvents. Les bâtiments seront cédés au séminaire de Sainte-Garde des Champs moyennant une pension viagère versée aux religieuses et aux institutions qui les acceuillaient.
Ce séminaire, fondé en 1709 près de Saint-Didier par l’abbé Joseph Francois Salvador (ancien mousquetaire du Roi puis capitaine dans le régiment d’Infanterie de la Reine), ouvrit une succursale à Avignon en 1710 d’abord rue Picpus puis place Pie. Erigée en Communauté ecclésiastique le 6 janvier 1719 et placée sous la protection de la Vierge et de Saint-Joseph, la congrégation fut approuvée plus tard par Benoît XIV.
Le nouveau propriétaire, désireux d’en faire un centre de formation intellectuelle, rachète les maisons alentour, remanie entièrement le couvent notamment la façade de la rue Sainte-Garde (actuellement rue Général Leclerc) et aménage une cour plantée de platanes. En 1770 l’église est démolie et reconstruite en 1775 par l’architecte aménagées à proximité de la salle d’audience : entre les contreforts ouest de la chapelle (coté rue).
Les inondations de 1840-1841 endommagèrent les bâtiments ; les juges « civils » et les magistrats du Tribunal de commerce durent partager comme salle d’audience l’ancienne salle du conseil au 1er étage du bâtiment nord. La chapelle dégradée, humide et difficile à chauffer
En hiver, étouffante en été, bruyante à cause du marché de la place Pie était devenue inadaptée.
Une mission est confiée à l’architecte du Départeemnt Joseph Auguste Joffroy qui, dès juin 1850, soumet ses projets d’agrandissement et de création d’une nouvelle salle d’audience. Il propose de border la cour par une nouvelle aile à l’ouest et d’élargir celle du sud pour y installer la nouvelle salle d’audience. Des immeubles sont expropriés, sont l’hôtel du Chapeau rouge, par décret impérial d’utilité publique du 19 mars 1853 ; le 5 novembre les ordonnances d’envoi en possession sont prononcées. L’entrepreneur Antoine Monge, adjudicataire des travaux le 21 juillet 1853, recoit l’ordre de services en décembre ; le décompte des travaux s’élèvera à 80 959.10 Frs en mai 1857.
Le tribunal civil tint sa première séance dans la nouvelle salle d’audience le 18 avril 1856.
Entre-temps, par délibération du 24 Aout 1854, le Conseil général a remis la chapelle aux pr^tres de Sainte-Garde ; cette congrégation n’étant pas autorisée, la paroisse Saint-Pierre en reçoit la jouissance et en fait une église de secours vers 1857. La loi de 1905 sur la séparation de l’Eglise et de l’Etat désacralisa l’église.
Les difficultés d’accés, notamment lors du transfert des prévenus, l’encombrement lié à l’activité du marché de la place Pie et l’agitation populaire lors de certains procés sensibles, poussèrent le Conseil général, en 1901, à envisager la délocalisation du Plais de justice dans le quartier moins central, plus calme et aéré : boulevard Raspail dans l’hôtel de Caumont.
Ce projet fut abandonné et des travaux de modernisation du Palais de justice furent engagés en 1903 : amélioration de la salle d’audience et contre celle-ci au sud de la cour, construction de la salle destémoins par l’architecte départemnetal Michel Tourtet ;  éclairage au gaz du Tribunal de commerce ; installation du téléphone au Parquet.
Suite à de nombreuses démarches de la part des Chambres syndicales ouvrières et notamment d’une pétition de 1600 signatures adréssée en 1904 au maire Henri Guigou peu après son élection, l’église fut affectée à la Bourse du travail par un bail de 15 ans et compartimentée en plusieurs salles. Inaugurée le 14 juillet 1906, la Bourse y demeura jusque vers 1930 où elle s’installa rue Ledru-Rollin.
Au début de la 1^ère Guerre Mondiale, une parite du 118^ème régiment de tirailleurs y stationna d’aout 1914 à février 1915, des cuisines furent installées dans la cour.
Du fait de la réforme judiciaire, Avignon devient le siège du Tribunal départemental au début de 1927 et accueille tous les tribunaux supprimés, notamment la Cour d’Assises.

L’implatation du Tribunal de commerce à la place de la Bourse du travail amena la pose de lambris en 1929 e la restauration, fin 1930, par le peintre Francois OMER, du tableau « la création du tribunal des causes mercantiles » de Louis Parrocel afin d’y être installé dans la salle d’audience.
Dans la deuxième moitié du XXème siècle, du fait de la croissance urbaine de l’agglomération, du nombre de justiciables et d’affaires, les locaux deviennent peu à peu insuffisants par leur taille et inadaptés dans leur disposition. Une cité judiciaire est construite à l’extérieur des remparts, boulevard Limbert et en janvier 2001 le Palis de justice y emménage.