Могу ли я сделать ворота в заборе своего участка, если он стоит на границе поселка?

Есть участок в АДНП. Одна сторона участка это граница посёлка, стоит забор, который является ограждением посёлка ( к слову только с одной стороны, весь периметр посёлка забором не охвачен). Хочу сделать свои ворота и калитку, чтобы был проезд минуя шлагбаум. В посёлке всего 1 центральный въезд, пожарных выездов вообще нет. При покупке участка организатору посёлка вносился целевой взнос на дороги и инфраструктуру. По факту дорог в посёлке нет, так как на карте это частный участок земли. Первый владелец не передал новому председателю ничего. А сейчас новый председатель против моих ворот, пишет на меня заявления о порче общего имущества. Но забор без фундамента, на баланс посёлка его никто не передавал. Могу ли я сделать в итоге свой выезд с участка?