Ubicado en el antiguo terreno del Convento de los Santos Mártires. Tras la Desamortización de 1842, el convento y su iglesia fueron demolidos y el terreno pasó a manos privadas. Fue el aristócrata y senador Carlos Manuel Calderón quien adquirió la propiedad, construyendo aquí su casa de recreo y renombrando el lugar como Cercado de Calderón. Durante este período, se erigió el palacete, se diseñaron jardines y se amplió una alberca, que originalmente almacenaba agua para el riego, dándole un aspecto similar a un lago. En 1862, el Carmen tuvo el honor de recibir a la reina Isabel II y al rey consorte. Tras el fallecimiento de Calderón en 1864 el Carmen pasó a su viuda. En 1870 lo vendió a su hijo don Carlos María Calderón y Vasco, general del ejército carlista (Granada 1845- Paris 1891). El poeta José Zorrilla residió desde el 15 de junio al 23 de julio de 1889, con motivo de su coronación como Poeta Nacional en el Palacio de Carlos V.
En 1891, el rico financiero belga Humbert Meersmans (1853-1938), adquirió la propiedad y dejó una huella significativa en su decoración actual, introduciendo un estilo más romántico y viviendo el Carmen su periodo de esplendor. En 1904, los reyes de España, Alfonso XIII y Victoria Eugenia, fueron también recibidos en un espléndido banquete organizado por Meersmans. Sin embargo, al final de su vida, este se vio arruinado y vendió la propiedad al Duque del Infantado, quien creó un magnífico mirador con vistas a Granada y un hermoso patio nazarí. La última propietaria sería su hija Sor Cristina de la Cruz de Arteaga, que heredó el carmen de su padre.
En un gesto de generosidad, acordó con el Ayuntamiento de Granada su adquisición en 1957.