El conjunto está rodeado por una muralla de doble lienzo almenado y protegido por varios torreones; uno de ellos utilizado posteriormente por la colegiata como campanario.