L’association a été créée en mars 2006. Elle a pour objet la sauvegarde du village de Périllos, de son environnement et de sa mémoire, et son intégration dans la vie quotidienne et culturelle. Terre de pierres travaille sur les parcelles communales, dont elle est locataire, en utilisant matériaux et techniques traditionnels de construction. Les travaux sont menés sous forme de chantier associatif avec comme premier objectif la création d’une structure d’accueil pour les participants à ses activités. Depuis 2006, deux bâtisses ont été remontées. L'une sert de remise pour les outils et matériaux au rez de chaussé, et de dortoir pour les participants à l'étage. Le deuxième bâtiment sert de maison commune (cuisine, salle à manger, salle de cours, salle de détente, etc...). Une troisième grosse bâtisse est en cours de restauration. Le chantier associatif travaille également à l'aménagement des espaces communaux du village et de son territoire: empierrements, restauration des murs de soutènement de la route d'accès, murets en pierres sèches, places et rues du villages, remise en état du cimetière, etc... Des actions peuvent être également menées à l'extérieur sur le patrimoine, monumental ou petit bâti rural (forteresse d'Opoul par exemple). Avec la restauration de Périllos et sur ces autres sites d'intervention, l’association s’engage dans une démarche de transmission des savoir-faire de la construction rurale traditionnelle locale.