Muy mal estado. Tan solo quedan unos muros muy transformados.
Fue construído en el siglo XII, cuando la presión cristiana sobre estas tierras lo hizo necesario. Entre los años 1243 y 1244 fue conquistado por las tropas castellanas del infante Alfonso (futuro Alfonso X el Sabio) y por una mesnada de 200 soldados aragoneses mandados por Juan de Sarriá, que seguían órdenes de Jaime I. Según el Tratado de Almizra de 1244, Jarafuel quedó en el reino de Castilla, aunque en el Tratado de Campillo, en 1281, se incorporó definitivamente a Valencia. Juan Pérez de Ayerbe fue el primer alcaide valenciano del castillo. Durante la Guerra de los Dos Pedros, en 1366, el castillo de Jarafuel quedó arruinado. En 1386, Alfonso de Aragón, marqués de Villena reparó todas las fortalezas del valle. En 1429 fue tomado otra vez por tropas castellanas. Sufrió los rigores de la guerra durante la expulsión de los moriscos, pues éstos se refugiaron en él y fue tomado a la fuerza por el duque de Gandía. Finalmente, su ruina definitiva llegó durante la Guerra de Sucesión, cuando fue bombardeado.