Aquesta fortificació es situa a un turó casi a les afores de Blanes.

El nom el reb degut a l'ermita que es situa als peus del castell. A la part alta del turó es troba la torre mestra, de més de 15 metres d'alçada i 7,25 metres de diàmetre, els murs son bastant irregulas i oscil·len entreels 95 i els 120 centímetres de gruix i comptava només amb una porta d'accés; la seva base era atalussada i estava vorejada d'un fosat.

La torre es troba envoltada per un recinte emmurallat rectangular, però que es troba fisurat a per la banda oest.

El primer cop que es va parlar d'aquest va ser al 1002, quan era possessió dels vescomtes de Cabrera.