En el año 1170 se sabe que ya estaba construido el castillo en lo alto del núcleo urbano. Se debió de comenzar a construir al tiempo que se fundó Montblanc el 1163 por el rey Alfonso I el Castro, el cual libró la Carta de Población a favor de Pere Berenger de Vilafranca. Este núcleo urbano se denominó Montblanc cuyo nombre quiere decir "mont erm" , o sea sin vegetación.
La muralla contaba con cuatro portales, dos de los cuales ( el de Bover y el de Sant Jordi ) todavía permanecen en pie. Durante el año 1649 el recinto fue destruido parcialmente por las tropas castellanas que asaltaron y despojaron a la población. En 1744 las torres comenzaron a ser vendidas a particulares por lo que se inició una época de degradación.
