L'image la plus « typique » de La Vila Joiosa est cette toile de pierre et de couleurs que l'on aperçoit depuis le pont de la route ou depuis la rive sud de l'Amadorio, sur son dernier tronçon. Les pierres des remparts de la Renaissance et les couleurs caractéristiques du centre historique de La Vila Joiosa, l’un des mieux conservés et un exemple de polychromie dans la Méditerranée occidentale, témoignent de l’adaptation des espaces aux différentes époques de l’histoire.
Après la destruction, en 1543, des remparts et de l'église de la ville par les Barbaresques, un décret royal a ordonné la reconstruction de ces édifices, car on ne pouvait pas permettre que La Vila Joiosa, capitale de l'une des dix circonscriptions du royaume chargées de la défense contre la piraterie, ne figure pas parmi les forteresses les mieux artillées du royaume.
Grâce aux impôts sur la soie, la « Generalitat » de l’époque a financé la muraille qui délimitait la ville du fleuve Amadorio. Lors de la guerre de Succession, La Vila Joiosa, tout comme Alicante, fut la dernière ville à se rendre, et les troupes bourboniennes détruisirent les portes de la ville. Bien que La Vila Joiosa ait continué à subir des attaques de corsaires tout au long du XVIIIe siècle, le danger algérien disparut à la fin du siècle et les remparts perdirent leur utilité. C’est à partir de ce moment-là que les habitants commencèrent à construire par-dessus les remparts, façonnant ainsi, sans le savoir, ce qui allait devenir l’image la plus photographiée de La Vila Joiosa.
Une promenade le long du lit de l'Amadorio, réaménagé et transformé en parc, vous permet non seulement de profiter d'un poumon vert au cœur de la ville, mais aussi d'admirer ces maisons colorées situées sur les remparts sous d'autres angles. À titre d'anecdote, dans ce parc, sur l'autre rive du fleuve, se trouve un autre édifice singulier de La Vila Joiosa, le « Molí Reial de la Llobeta », actuellement en cours de rénovation.