Binnen de oude stadsmuren vind je het Palau del Batle dat nu het stedelijk museum huisvest. Hier zijn er schilderijen bewaard van kunstenaars die hier ooit de streek bezochten. Deze stad was vroeger een echte kunstenaarskolonie, tot de toeristen kwamen.
Deze stad van vroegromeinse oorsprong heeft nog resten van die periode (prachtig mozaïekwerk). De oude stad bewaart nog de middeleeuwse sfeer, waarvan nu nog 3 van de 5 vestingtorens bewaard zijn gebleven. Het is dan ook zeer aangenaam wandelen in het centrum van Tossa de Mar.
Wie denkt dat het hier rustig is zal van een kale reis terugkeren. Tossa is zeer kleinschalig met weinig strand en kan daardoor niet veel toeristen ontvangen. Wie uitstapjes maakt langs de Costa Brava moet deze stad zeker en vast bezocht hebben.