Le Centre culturel Camille Darsières se situe dans l'ancien palais de justice, un édifice de type néoclassique conçu en 1906 par l'entrepreneur Gustave de Laguarigue. Il se situe à l'intersection des rues Perrinon, Schoelcher et Moreau-de-Jones.
Ce bâtiment fut à son origine l'emplacement du couvent des Filles de la Providence fondé par le père Charles François de Coutances au 18ème siècle. Il en fit don à la colonie en 1764 à condition qu'il y soit dispensé une instruction religieuse et profane, ainsi que des cours de danse et de maintien. Il devint par la suite le palais de justice de la Martinique.
Suite à la construction d'un nouveau palais justice plus moderne et plus fonctionnel l'ancien palais est devenu un espace dédié à la culture. Actuellement il abrite le Sermac (Service Municipal d'Actions Culturelles de Fort-de-France), car les bâtiments de ce dernier se trouvant au parc floral de Fort-de-France sont en rénovation. Le SERMAC est acteur du festival culturel de Fort-de-France.
Au milieu du jardin s'élève une statue de Victor Schoelcher au pied de laquelle il est gravé : "Nulle terre française ne peut plus porter d'esclaves". Il doit son nom à l'ancien avocat député de la Martinique Camille Darsières décédé en 2006.