Plans : service urbanisme, jusqu'où peuvent-ils aller ?

Bonjour à tous, nouveau sur ce forum, je me lance dans mon projet de construction.
Le terrain est acquis, pas de soucis là-dessus.
Je suis en cours de finalisation des plans de principe avec mon archi et nous avons eu le premier rendez-vous avec le service d'urbanisme communal pour présenter les premières esquisses et présenter le projet avant dépôt du permis.
Et là, je crois être tombé de haut....
Le monsieur ne connaît pas le HQE, qu'il confond avec géothermie (...!!!), n'aime pas "ces maisons plein de fenêtres"; un mur, c'est de la brique ou du parpaing, point... ! a déjà interdit une maison car elle était en bois (ce n'est pas légal je crois), n'a jamais entendu parler des nouvelles normes qui arrivent en 2012, et a mis de nombreuses croix rouges sur les plans car il ne trouvait pas ça joli !...
... et il va falloir lui confier un permis de construire pour instruction !!!.
Je ne sais pas où je vais.
Jusqu'où peuvent-ils aller dans leurs décisions ??!!
Le PLU est respecté; un exemple : "les fenêtres doivent être plus hautes que larges" (texto dans le texte). Il nous interdit 2 fenêtres car il ne les trouve "pas jolies" (!!??), il les trouve trop hautes et trop fines, ça fait moderne, c'est pas joli !
Est-ce que tous les gens qui font construire doivent créer la maison idéale de ce monsieur ?
Quels recours ou négociations possibles avec ces réactions très subjectives, voir "basiques" ?
Si le PLU est respecté, jusqu'où peuvent-ils aller dans ces considérations "c'est pas joli...", puis-je contre-attaquer ?! (intelligemment bien évidemment, j'ai mon permis à avoir dans un proche avenir !).
Merci pour vos avis éclairés.