D'entre els segles X i XI data la construcciò del castell de Sant Joan, situat al cim de la muntanya que separa les platges de Lloret de la de Fenals. Probablement, fou a partir de llavors quan el poble de Lloret es va establir arrandel mar (perque, antigament, estava situat més a la zona de l'interior, on actualment hi ha l'ermita de les Alegries).  El castell, estrategicament situat, servia de torre de vigia per prevenir els possibles atacs marítims que podien venir de vaixells pirates, de francesos o de genovesos... que, durant molts segles, varen assetjar la costa catalana. En moments de perill, els 1loretencs corrien a refugiar-se, amb els seus béns (joies i bestiar) a dins del castell. Els constants setges i atacs als quals es va sotmetre el castell va comporta que patis nombrosos incendis i destruccions. Durant la guerra contra Anglaterra, l'any 1805, un vaixell de guerra britanic va llançar diverses canonades que enderrocaren part de la torra i de la muralla. Finalment, una tempesta de l'any1923, va acabar d'enderrocar l'antiga torre del castell. Recentment, la torre principal "d'homenatge" va ésser restaurada i, la zona que conforma el pati central de l'edifici fou netejada per tal que la gent pugués disfrutar de la vista excepcional.