El arquitecto del castillo y la iglesia fue Juan Gil de Hontañón, que por aquel entonces trabajaba en la nueva catedral de Segovia.