Accord des voisins pour construire

Bonjour à tous.
Voici notre problème, nous souhaitons batir sur une parcelle en lotissement en indivision.
Le plans sont presque terminés, je me suis présenté en mairie afin de leur présenter.
La personne qui m'a reçu m'a indiquée que je pouvais déposer en mairie le projet mais qu'il nous était nécessaire pour nous d'avoir l'accord de tous les voisins afin d'être couvert et pour éviter tout procès futur.
J'ai fait le tour de ces derniers et bien sur, un voisin me pose problème. Il ne sera pas géné par la construction puisqu'il est assez loin par rapport à nous.
CEpendant il cherche un dédommagement quelconque....Il sait que si il ne nous donne pas sa signature nous ne pourrons batir....donc il en profite.
est-il vraiment nécessaire d'avoir cette signature, si oui pourquoi?
N'y a-t-il pas un moyen de contrer cela?
Quel risque encourons nous si nous faisons batir tout de même?
Cet E....é nous tient, cela laisse présager de bonne relations futures...si nous pourrons un jour batir...
Merci pour votre aide