En restaurarse el año 1958 se descubrió su estructura primitiva (s.XIII). Probablemente formaba parte de las Escribanías. En el siglo XVIII fue residencia de los Josa, que el reformaron y ampliaron. Actualmente es la sede del Museo Comarcal y contiene un importante fondo de colecciones de arqueología, etnología, bellas artes y documentación referentes a la Conca de Barberá.