El castell de Travesseres ocupa la zona central del nucli del poble. És un clos format per diverses cases que, probablement, ja en època antiga van reaprofitar els murs del castell i s'hi van adosar. Dels castell només en queden algunes filades que podrien correspondre a la base dels murs, i algunes espitlleres conservades en algunes cases. De fet, l'element més clar i identificador del castell seria el mateix clos que fan les cases. Tanmateix, també s'hauria de considerar la possibilitat que es tractés d'una "vila closa", sense el castell pròpiament dit, sinó justament un nucli tancat, format per cases fortificades. Aquest tipus de fortificació és bastant corrent a la Baixa Edat Mitjana, i considerant que documentalment només apareix des del segle XIV, la hipòtesi podria ser encertada.