Terrain lotissement dégradé lors de la viabilisation

Bonjour

Nous avons un projet de construction de maison individuelle sur un lotissement en cours de viabilisation. 
Je viens de me rendre compte que le terrassier s'est permis de creuser un trou de 80 cm de profondeur sur plusieurs mètres à l'emplacement de la futur maison pour "stocker son sable". Ce trou a ensuite été rebouché et compacté avec un remblais. Il n'était pas au courant du positionnement de la maison.
Le lotisseur explique que cela est normal et n'a aucun impact car un vide sanitaire sera nécessaire pour les fondations (ce qui est vrai). J'ai peur que le bon sol est été endommagé et que les fondations nécessitent de creuser plus profond (et plus de frais).
Je n'ai pas acheté le terrain et seule une promesse de vente a été signé (achat validé si terrain viabilisé ET permis de construire validé).

Comment dois je réagir dans cette situation ? Dois je exigé une compensation (notamment si surcout de fondation).

Je vous remercie d'avance pour votre avis éclairé.