Как можно с сыном произвести обмен долями в квартире?

Здравствуйте. Есть трехкомная квартира, в которой 1/4 доля в мой собственности, 1/4 моего несовершеннолетнего ребёнка, 1/4 его отца (моего бывшего мужа) , 1/4 сестры бывшего мужа. Есть также 2 комнатная квартира в собственности нынешней жены бывшего мужа. Хотели совершить обмен наших с сыном долей на эту квартиру. В органах опеки сказали, что по статье 37 п.3 ГКРФ это не возможно. Может есть какие-то нюансы? Это единственная собственность, там проживает бывший муж с семьей, и продавать ее бы не хотелось, но вместе мы жить не можем же