El Convento de Nuestra Señora del Carmen de Cogolludo fue fundado por Juan Fonte de la Cruz el 5 de abril de 1590. Inicialmente, estaba situado en la antigua ermita del Val, pero finalmente se edificó en el paraje del Cambrón. Fonte de la Cruz donó al convento 20.000 maravedíes para su construcción y 4.000 maravedíes anuales de limosna. Aparte de eso, el concejo de la villa le concedió 6.000 maravedíes anuales de renta. El edificio fue inaugurado el 18 de septiembre de 1596. En 1749, Antonia del Vado, vecina de Montarrón, donó al convento varias casas, huertas, olivares y viñedos que poseía en Cerezo y en Beleña. A lo largo de la historia del convento, el número de frailes osciló entre los 9 y los 28.

La Guerra de la Independencia (1808-1814) interrumpió la vida del convento. En 1809, los frailes tuvieron que abandonar el edificio, que fue incendiado por las tropas francesas el 23 de agosto de 1811. El 10 de mayo de 1814, tras el fin del conflicto, la villa de Cogolludo solicitó al provincial de los carmelitas el restablecimiento del convento, que fue reconstruido en poco tiempo con la colaboración de los habitantes. El convento fue suprimido por los decretos de exclaustración de 1835.