El castillo, restaurado y en excepcional estado de conservación, tiene en su patio de armas el Centro de Interpretación Medieval “Tierra de la Frontera”, que permite un atractivo recorrido por la historia del medievo a través de sus siete salas: Sala de la Orden de Santiago, Sala de Atalayas, Sala de Urbanismo, Sala de Armas, Sala de Naturaleza y repoblación, Sala musulmana y Sala audiovisual donde se reproduce el documental “Vivir en la Frontera”. Proyecto realizado y llevado a cabo por la Asociación cultural Romeros de San Bartolomé y especialmente por la dirección y coordinación de Luis Llopis. Y en los antiguos calabozos se encuentra un Museo Etnológico.

Los árabes hicieron de Yeste la fortaleza más importante de la Sierra del Segura. A su torre rectangular, del siglo XIII, se le añadió una muralla para contener la población, crecida a su amparo. El patio de armas, columnado, con doble galería, la inferior de estilo gótico, y la superior en madera, recuerda las plazas mayores porticadas. En la puerta de la torre principal encontraremos los escudos heráldicos de la Orden de Santiago y la familia Figueroa.