Permis de construire et conditions suspensives

bonjour à tous, je suis nouveau sur ce forum. j'ai 50ans et souhaitant faire construire ma maison pour la retraite,j'ai trouvé un terrain proposé par un constructeur de maison.Ce terrain est une proprièté dont le proprietaire vends 3 parcelles.Apres le choix de la maison, de son implantation sur le terrain,un contrat de construction a été signé( sans debours de ma part) le permis de construction deposé. Celui ci en première lecture est ok, puis apres le delais legal, il me revient refusé.La cause, le constructeur n'a pas demandé prealablement de permis d'amenager.Le constructeur refait donc les formalités, mais la mairie impose un emplacement pour la maison sur le terrain qui ne me convient pas.
Légalement que puis je faire? On ne peux quand meme pas m'imposer de signer une demande de permis de construire qui ne nous convient pas?
Puis je tout arreter sans risque financier(dans le contrat de construction il est dit que si j'annule tout je dois 10% du prix de la maison) .Par ailleurs, à ce jour, sur ce fameux contrat, figure une surface de terrain erronée,ne figurent pas les données cadastrales, et figure une promesse de vente du notaire, que je n'ai jamais vu (les propriétaires du terrain non plus d'ailleurs)
Merci de m'apporter les conseils necessaires...
Bien à vous tous..
jm