Les poques restes del castell que es conserven es situen al cim d'un turó, a migjorn de la coneguda com Capella de Sant Martí Xic. La planta del castell està adaptada a la topografia, molt irregular, on destaca una punta mirant a sud-oest. Al bell mig del recinte, que hauria estat emmurallat, es situaria una estança de planta rectangular. Aquesta, a sobre del punt més alt del turó, assenyalaria l'entrada d'un passadís o mina, que segons la tradició, portava fins a Sorreigs.