El origen de esta canónica es muy confuso, hay varias referencias no contrastadas y no se encuentran documentos fiables que hagan referencia a ella hasta mediados del siglo XII. Se trataba de una canónica agustiniana dependiente de la catedral de Segovia. En el siglo XVI la casa se encontraba en decadencia y se habían relajado las costumbres de los miembros de la comunidad, debido a ello en 1560 dejó de depender del obispo de Segovia y se vinculó con Madrid. En 1567 se convirtió en propiedad de San Lorenzo del Escorial, que mantuvo en ese lugar un colegio de jerónimos hasta que en 1575 se trasladó a El Escorial. En 1604 la casa fue víctima de un incendio. Fue propiedad del Escorial hasta que con la desamortización pasó a manos particulares.