Talavera llegó a tener tres líneas de murallas, la primera y la que mejor se conserva, fue mandada construir por Abderramán III en el siglo IX. La primera línea de murallas acordonaba la villa de la ciudad.

Justo detrás de la muralla, en el llamado Huerto de San Agustín, se construyó un gran palacio, la Alcazaba de Talavera, que estuvo en pie varios siglos, siendo utilizado por reyes y nobles católicos posteriormente tras la marcha de los musulmanes de España.

Aún se aprecian restos arqueológicos como la entrada o lo que parece una pequeña capilla. En ella, por ejemplo, fue mandada degollar doña Leonor de Guzmán, favorita del rey Alfonso XI, que tras morir éste último en Gibraltar, su esposa, doña María de Portugal, reina que da apellido a la ciudad, cansada de años de aguantar dicha situación, optó por esta cruenta opción.