Sobre una pequeña colina, al Sur del casco urbano.
Muy mal estado. Prácticamente, lo único que queda son dos torreones maltrechos unidos por un muro.
Torre puerta, con acceso en recodo. Construída en mampostería y restaurada hace pocos años. Todavía se mantiene la bóveda.
Castillo montano de planta irregular. Solo quedan vestigios de un solo recinto. Ocupa una plataforma natural de forma sensiblemente ovalada, de 60 x 40 m, que cubre una superficie de 1.850 m2 aproximadamente. Tan solo conserva en su flanco Noreste, dos torreones unidos por un lienzo. Aunque en diversas fuentes se dice que son de planta rectangular, a nosotros nos parecieron cuadrados, con un lado de 7 metros, más o menos, la oriental, y algo menos la torre-puerta. En el torreón Norte se abre la puerta. Es del tipo en recodo, se encuentra en el lienzo Este de la torre y penetra en el castillo hacia el Sur. El arco es de medio punto, pero con la restauración ha sido rellenado con cemento y no se aprecian dovelas ni sillares. El otro torreón, orientado al Este, totalmente distinto, es de tapial y fue reutilizado como pajar. Su estado es malo. El lienzo que los une presenta fábrica variada, con mampostería en la base y tapial en su parte superior. Además presenta varias aspilleras.
Diversas imágenes de la otra torre, de tapial, y transformada en pajar.
Origen musulmán, pero en el cerro se han encontrado restos celtíberos. El príncipe musulmán de Albarracín lo entregó al rey Sancho Ramírez de Aragón en 1093, en prenda de alianza mutua contra el Cid, que se encontraba entonces en Valencia. Perteneció a la Comunidad de Daroca. Estuvo involucrado en las guerras castellano-aragonesas, al estar situado a escasos kilómetros de la frontera. Sus ruinas pueden ser de finales del siglo XIII, pues ya se cita en tiempos de Pedro III. Recientemente se han llevado a cabo obras de restauración, con refuerzo de las cimentaciones y la consolidación de elementos estructurales.
Único lienzo conservado, con fábrica de mampostería basta y tapial en la zona superior.
Torralba desde el Norte. A la derecha del campanario se ven las dos torres del castillo.