La Seconde Guerre mondiale laisse la France dévastée : les infrastructures, les usines, les exploitations agricoles et les villes sont très fortement touchées. La pénurie de logement empêche les familles modestes de se loger dignement. L’État se lance alors dans un programme national de reconstruction sans précédent. La tâche est à la mesure du désastre et le problème de l'habitat, posé principalement en terme d'indemnisation, ne tient pas compte des besoins en logement. Des millions de personnes sont mal logées, vivent dans des bidonvilles ou des habitations insalubres et le retard de la France en matière d'accès à l'eau et d'hygiène est très important. C'est face à la défaillance des pouvoirs publics et avec le soutien de syndicats que le premier Comité ouvrier du logement (COL) est fondé en 1948 à Pessac en Gironde. Il sera surnommé «Les Castors», en référence à cet animal connu pour ses constructions et sa sociabilité. Les Castors s'inspirent de mouvements collectifs d'auto-construction tels que celui de Lyon de la fin du 19e siècle ou des « cottages sociaux » de l'Entre-deux-guerres, fondés sur le principe de l'apport travail. L'organisation du chantier et la quasi totalité des travaux sont effectués par les membres du collectif pendant leur temps libre, l'apport travail se substituant ainsi à l'apport financier et permettant à des familles modestes de financer la construction de leur logement. Une décision ministérielle du 5 mai 1949 permet la reconnaissance officielle du principe de l'auto-construction et par conséquent l'octroi d'aides financières et de prêts de l’État à la construction. Ce soutien des pouvoirs publics permet alors l'essor des coopératives «Castors». En novembre 1949 en France, six groupes de castors sont constitués. Ils fondent l'année suivante l'Union nationale des Castors qui sera chargée de coordonner l'action des différents regroupements, les conseiller administrativement et juridiquement, les soutenir financièrement et techniquement. A Poitiers, en 1949, quelques ouvriers, qui n'ont d'autre possibilité pour disposer d'un logement que d'en assurer eux même la construction, décident de tenter l'expérience. Leur projet est ambitieux puisqu'il porte sur un ensemble de 150 maisons individuelles en moellons apparents sur un terrain 15 hectares de la commune de Buxerolles. Un appel est lancé dans la presse locale pour recruter les volontaires prêts à les rejoindre, et en peu de temps, fin janvier 1950, l'objectif des 150 candidats est atteint. Dès février, la pierre qui n'a pas pu être récupérée sur place comme prévu est extraite de la carrière de Lavoux et transportée à Buxerolles. Les conditions de travail sont difficiles, chaque jour des Castors sont présents à la carrière pour trier et charger les moellons.La construction de la voirie commence en août 1950 et se poursuit jusqu'à la fin de l'hiver suivant. A la fin de l'année 1950, 8 000 mètres cubes de pierre sont disponibles sur le chantier, un baraquement est installé ainsi qu'un bureau, un entrepôt et un réfectoire. Le projet architectural a été confié à l'architecte André Serreau et son assistant Paul Bonnin. Il comporte, en première ébauche, des bâtiments collectifs répartis autour d'un espace vert, des terrains de sport, des promenades, une piscine et un « théâtre de verdure ». Il sera réorienté pour une prédominance de maisons individuelles et des espaces verts mieux répartis. Ce projet propose une alliance entre l'intimité de chaque habitation et la circulation intérieure de la cité, des formes architecturales modernes et des matériaux de qualité : il est adopté par les Castors le 18 janvier 1951. Les Castors versent une cotisation mensuelle de mille francs chacun et s'engagent à consacrer vingt-quatre heures par mois au chantier. Les travaux des fondations des logements de la première tranche de 50 logements sont creusées à partir de janvier 1951 et la maçonnerie commence en septembre. Une commission a été créée pour constater l'état des logements des personnes demandeuses : 50 familles ont été retenues et un tirage au sort effectué afin de placer en priorité les plus mal logés. Le sable et les graviers sont tirés d'une sablière achetée près de Dissay et les Castors s'approvisionnent en tuiles de Roumazières. En février 1952, soit 2 ans après le début des travaux, les Castors bénéficient enfin de subventions et d'un prêt de la sécurité sociale en attendant le versement de la Caisse des dépôts et des consignations. Les quatre premières maisons sont occupées en septembre 1952. En juin 1953, les 50 maisons de la première tranche sont habitables, le terrassement est terminé pour 50 autres, la viabilité du terrain est réalisée en totalité et 380 arbres et arbustes sont plantés. Pour accélérer la construction, les Castors font appel à un personnel qualifié et des entreprises pour le gros œuvre. A la fin de l'année 1954, 90 bâtiments sont occupés, 54 autres sont en cours d'achèvement et le Centre commercial et social construit. En 1955, le programme est terminé. Outre la réalisation de 144 logements, ce projet permet la construction d'équipements collectifs : une école ouverte début 1954, une salle des fêtes construite en 1957 et 1960-1961 et une coopérative commerciale créée dès 1954 proposant divers commerces tels que : une boulangerie, une pharmacie, une boucherie… L'église du Planty s'ajoute à l'ensemble en 1962. Le Comité ouvrier du logement prononce sa liquidation lors d'une assemblée tenue le 27 octobre 1978 dans la salle des Castors. Dès ses débuts, le projet a des conséquences sur le quartier et son aménagement, donc sur les décisions que la municipalité de Buxerolles est alors amenée à prendre. Le 23 avril 1950, le conseil municipal demande le classement en chemin vicinal ordinaire du chemin rural de la Voie Romaine, anticipant la circulation intense que va engendrer le chantier. Le 2 octobre, alors que les travaux sont sur le point de commencer, le conseil municipal décide d'étendre son réseau d'adduction d'eau pour le relier à celui de la future cité. Plus tard, le 14 avril 1951, le conseil municipal accepte d'intégrer à la voirie communale les rues créées par les Castors. Le financement est assuré par les recettes des loyers versés par les membres du COL (en plus de l'apport travail), par les importantes subventions de la commune de Buxerolles, et par les aides de l'Etat, le ministre de la Reconstruction et de l'Urbanisme, Eugène Claudius-Petit, mettant alors en oeuvre son plan national d'aménagement du territoire. Les Castors reçoivent des prêts à taux réduits accordés par la Caisse des dépôts et consignations, la Caisse d'épargne et le Crédit foncier, et des aides de la Caisse d'allocations familiales et de l’Éducation Nationale. Les réalisations des Castors ont permis à 144 familles modestes d'être logées et ont marqué un tournant dans l'histoire de la commune de Buxerolles qui est aujourd'hui la troisième commune du département avec plus de 10 000 habitants.
