Le village est mentionné pour la première fois en 899 (villa Tordarias). Son nom semble correspondre au latin "turdus" ("tord" en catalan), désignant la grive. Ce nom indiquerait donc une commune giboyeuse, abondante en grives. Plus de mille ans plus tard, c'est toujours le cas!

  Le village est mentionné en 899 comme faisant partie des possessions d'un certain Estève et de son épouse Anna qui étaient tous deux également propriétaires de biens à Llauro. Le texte fait déjà mention d'une église qui était alors dédiée à Saint Martin. En 927, Ato, fils d'Estève et d'Anna, vend la totalité de son héritage à l'église d'Elne et à son évêque Guadall. Cependant, pour Tordères, la vente ne concerne qu'une moitié de territoire, l'autre moitié appartenant à sa soeur. Cette seconde moitié, puis l'ensemble du territoire, seront ensuite cédés à l'Abbaye d'Arles-sur-Tech qui conservera la seigneurie de Tordères jusqu'à la fin de l'Ancien Régime.

  Au milieu du XIVème siècle, la population s'élevait à 19 feux, soit environ 80 habitants, chiffre identique à celui qu'on rencontre au début du XVIIIème siècle. Les Tordérencs n'ont jamais été très nombreux. S'ils ont été 143 en 1836, ils n'étaient plus que 98 dès 1856. Le niveau de population le plus bas a été atteint en 1968, avec 60 habitants. Puis, contre toute attente, la population a quasiment doublé entre 1990 et 1999, avec plus de 10 nouvelles naissances qui ont contribué à la réouverture de l'école, en 2001.

 Le village possède une église ancienne dont la construction s'échelonne du XIIIème au XIXème siècle. Dédiée à St. Nazaire, elle est de style romane, à nef unique. Elle a un clocher-mur disposant de deux niches, dont une seule est occupée aujourd’hui. Elle a été fortifiée et agrandie au XVe et XVIe siècles. Elle dispose d’un retable du XVIIIe siècle.