Existieron en la ciudad varias puertas como la de San Adrián, de la Alameda y la Puerta de Segovia. Esta última es la única que se conserva en la actualidad y es más conocida por "Puerta de la Villa".

Está formada por tres arcos presentados uno sobre otro y en la parte superior seis ventanas de ladrillo.

Se cree que data del siglo XII o XIII, fecha en la que se construyeron las murallas.

Por el lado norte se puede subir por medio de una escalera restaurada a la cima, lugar usado en su época como cárcel de la villa.