El convento del Carmen tiene sus origenes en 1281 (siglo XIII), cuando los carmelitas calzados se establecierón en Valencia a la muerte del rey Jaime I. Tomo el nombre de Real Monasterio de la Madre de Dios del Carmen (Reial Monestir de la Mare de Deu del Carme). Con la exclaustración del siglo XIX el convento quedó deshabitado y la iglesia pasó a ser Iglesia parroquial de la Santa Cruz en 1842.

El edificio que nos ocupa, hoy en dia cumple funciónes de sala de exposiciones temporales, dependiente a su vez del Museo de Bellas Artes. con el nombre de Centro del Carmen "Centre del Carme".

El convento se articulaba alrededor de dos claustros, el más antiguo de estilo gótico de los siglos XIV y XV y el segundo de época renacentista del siglo XVI. El claustro gótico dispone de cuatro arcos apuntados en cada uno de sus lados cerrado con bóvedas de crucería y mensulas historiadas, con animales monstruosos, figuras antropomorfas y escudos heráldicos, mientras que el renacentista se compone de dos pisos con ocho arcos en el primer piso y diesiseis en el segundo piso. Los arcos de ambos pisos todos de medio punto. Las bóvedas son de aristas de ladrillo y las columnas de orden dórico con capiteles estriados. Al piso superior del claustro se accede a traves de una escalera del siglo XVII situada en una de sus esquinas.

En una de las antiguas capillas que disponía el claustro gótico, en la actualidad podemos encontrar el sarcofago del escritor valenciano Vicente Blasco Ibañez, a la espera de que se le un destino mas digno que el que ahora cumple. El sarcofago realizado en 1935 por Mariano Benlliure donde consta la inscripción "Valencia a Vicente Blasco Ibañez" nunca ha llegado a contener los restos del famoso escritor que murió en Francia en 1933 y cuyos restos llegarón a Valencia en 1935 siendo enterrados en el cementerio general donde todavia reposan.

Aunque bastante desvirtuado por las modificaciones realizadas durante la recuperación del edificio para la función que hoy cumple, el convento disponia alrededor del claustro gótico de refectorio, sala capitular (llamada capilla de la Virgen de la Vida, en recuerdo de la imagen de la Virgen que allí se veneraba), y logicamente la iglesia conventual, conocida como Iglesia del Carmen.

El refectorio construido en el siglo XIV en estilo gótico, es de planta rectangular con grandes arcos de diafragma y techumbre de madera (hoy desaparecida). Hoy es utilizado como Sala de Exposiciones temporales.

Sala capitular recinto de planta cuadrada de época gótica. Lo único que conserva original es un gran ventanal apuntado dividido por una pequeña columnilla y dos oculos, uno a cada lado. Se tratan de elementos que fueron transpantados a este lugar, desde otro lugar del convento.

En 1839 con el convento ya vacio obligado por la exclaustración, se inauguró el edificio como Museo del Carmen, con el fin de recoger todas las obras de arte que con la misma habian quedado huerfanas en los conventos, iglesias y monasterios de su lugar de origen.

En 1848 la Academia de San Carlos que también disponía de un fondo de pinturas y que se encontraba ubicado en el edificio de la Universidad, se trasladó al Convento del Carmen y tomando la gestión de los fondos depositados en el mismo, crearian el germen del actual Museo de Bellas Artes de Valencia. En 1913 la gestión del museo pasaría a manos estatales. En 1946 finalizada la guerra civil española y como consecuencia de los daños sufridos por el edificio durante la guerra, los fondos del museo pasarían al edificio de San Pio V lugar donde se encuentran hasta el dia de hoy

El convento del Carmen quedó en estado de abandono hasta fechas recientes en que se ha procedido a su restauración, volviendo a cumplir funciones museisticas dependiente del Museo de Bellas Artes.

La actual fachada neoclásica debidamente restaurada fué realizada entre 1778 y 1779 por el maestro de obras José Gascó, realizada en lugar de la anterior que amenazaba ruina.