Le site se compose de trois lieux : le cimetière qui peut se visiter toute l’année en accès libre, la gare avec un wagon de type «Chevaux 8 Hommes 70» est aussi accessible en visite extérieure libre, et le musée situé sur la place du village. Le Mémorial rappelle l'existence d’un camp de concentration pour les réfugiés espagnols de février à septembre 1939, transformé en camp d'internement répressif pour les étrangers «indésirables» au cours de la seconde guerre mondiale jusqu’en juin 1944. Environ 40 000 hommes de 58 nationalités y ont été internés. C'est également de ce camp qu’ont été déportés des hommes, des femmes et des enfants juifs vers les camps d'extermination.
Dans le Musée, le visiteur découvre l'histoire du camp de concentration du Vernet à travers des documents, des objets, des photos (notamment 2000 photos d'internés datant de la fin 1939 et début 1940), des dessins et une maquette du camp de concentration.