Recours batiment de france

J'ai acheté une maison sur Bordeaux dans un copropriété soumise aux normes batiments de france. Après échange avec des voisins, j'ai appris que les anciens propriétaires avaient faits des travaux (changement fenêtres en PVC, crépis jaune et clôture en bois) sans faire de demande aux bâtiments de france. Je possède donc aujourd'hui une maison qui n'est pas du tout conforme. Je souhaite remédier à cette situation et refaire tous les travaux. Est-il possible de faire payer les anciens propriétaires qui m'ont vendus ent toute conscience une maison non conforme? merci d'avance, florence