Muy cercano a Villarcayo se encuentra el pueblo de Torme, que conserva varias casas armeras de interés. A la entrada de esta localidad se ubica el palacio fortificado de los López de Salazar o Fuerte de Torme, que ha sido restaurado recientemente por iniciativa privada.

Se trata de un edificio muy alargado, dispuesto en dirección este-oeste y formado por dos cuerpos, la torre y el área residencial. El cuerpo mayor es el más antiguo y fue levantado en el siglo XV. La puerta de entrada tiene un arco ojival, por encima del cual se sitúa un vano de arco conopial sobre columnillas con visera y escudos, de los cuales uno es el de los Salazar. Junto a esta parte de la construcción hay un edificio cuadrado, flanqueado al suroeste por un cubo de cuidada sillería.

Tiene una portada muy trabajada. Por encima de ella destaca una bella ventana renacentista muy decorada con columnas, flameros y escudos. Le sigue una pequeña construcción con entrada propia, que probablemente fue la capilla. Estos dos cuerpos últimos habría que fecharlos en el siglo XVI.

Fue declarado Bien de Interés Cultural en 1949.