El castillo se halla en la cuenca del Gaià, donde durante la reconquista se levantó una cuarentena de fortificaciones y castillos "el más antiguo el de Santa Coloma de Queralt, del siglo X". El de Tamarit tenía por función defender la costa de piratas berberiscos y otomanos.