Мы не охраняем свой земельный участок, соседи злобствуют, кто прав?

Нашей семье выделили землю под индивидуальное жилищное строительство. Это не коттеджный поселок, не дачные участки, а просто земля под ИЖС. Соседи нанимают на зиму сторожа, который охраняет их дома. Поскольку наш дом еще не достроен, да и по некоторым другим причинам, у нас сейчас нет необходимости охранять наш участок. Это вызывает яростное недовольство со стороны соседей. Кто из нас прав?