Mentionné dès le XIème siècle comme appartenant à l’abbaye de Lagrasse, son entrée est marquée par un arc en plein cintre roman. Aujourd’hui la mémoire collective a occulté le vocable de Saint-Martin au profit de celui de Saint-Jacques. Ce changement de dédicace est à rapprocher de la présence sur le site d’un ermite nommé Jacques, au XVIIIème siècle.