Нужно ли разрешение соседей для постройки дома?

Здравствуйте! У меня в собственности домовладение(хоз. постройки и дом построенный в конце 50 годов саманны) Из за ветхости я его снёс и строго на этом месте и по размерам старого дома построил добротный кирпичный,но чердак сделал жилым( мансарду).Соседи нажаловались в архитектуру, и теперь чтобы узаконить требуют разрешения соседей, а сними конфликт,им не нравяться окна на мансарде которые направлены на их участок,а по другому там просто никак.Участки у нас маленькие поэтому у всех от межи дома отступлены не 3 метра а 1. И вот мотивируют тем, что т.к. 1 метр нужно разрешение от них но они давать его не собираються, и получается,чтобы построить на своём участке дом, я должен не знаю как выпршивать разрешение соседей,Вообще законно ли это?? И если да то как мне быть? Спасибо!