En la entrada norte de Covarrubias nos recibe la puerta principal de la villa, cuyo interior alberga, desde el siglo XVI el Archivo del  Adelantamiento de Castilla.

Fue Felipe II quien mandó este majestuoso edificio en 1575 para albergar el Archivo como agradecimiento a su médico de cámara, Francisco Valles, apodado el Divino, en la localidad del que éste era originario.

La traza y el proyecto de esta obra se deben a Juan de Herrera y la ejecución corrió a cargo de Juan de Vallejo.

Se trata de un edificio aparece como un gigantesco prisma pétreo sostenido por ocho contrafuertes situados en sus lados que, a pesar de su robustez, contribuyen a la armonía del conjunto. Su sobriedad queda atenuada con la delicada decoración plateresca de sus ventanas, las cuales se cubren con elegantes rejerías del siglo XVI. La fachada principal se compone de tres cuerpos con ventanas de medio punto adornadas con motivos renacentistas, especialmente la central, más grande, con columnas a los lados. En el centro de la parte baja se abre el arco de entrada, sin ninguna decoración. En lo alto campea el escudo de Felipe II con los cuarteles de todos sus estados, el Toisón de oro y la corona real.

Los fondos documentales que albergaba fueron trasladados en el siglo XVIII al Archivo Nacional de Simancas, por lo que se buscó darle una nueva función. Actualmente la planta baja alberga la puerta de la villa y en ella se sitúa la escalera que da acceso a las superiores, que forman dos amplias salas abovedadas. En la sala de la derecha, a pie de calle, se encuentra la oficina de turismo de la localidad. La planta superior acoge el Museo del Libro y una sala de exposiciones.