Constituye, lo que hoy denominamos Granjilla (de Granja-Recreo en el lenguaje de los monjes jerónimos), uno de los conjuntos monumentales de carácter rural y privados, mas bellos de España. Su origen, como tantas otras cosas en El Escorial, están vinculados a Felipe II, que mandó edificar en el recinto del antiguo poblado de La Fresneda, un palacio de recreo, y un convento de descanso para sus monjes, conservando en parte su antigua parroquia. "Imágenes del Paraíso", creyó contemplar el padre Sigüenza, al describirnos La Fresneda, allá por los años iniciales del siglo XVII.