Возможно ли снять с регистрационного учета бывшего супруга?

Бывший муж не проживает в квартире, находящейся в моей собственности более 5 лет. Он проживает в другом городе, в другой семье, но свой дом в том же городе он продал и живет у сожительницы, не имея собственного жилья. Желательно было бы его снять с регистрации, т.к.мои права собственника ущемляются. Но проблема в том, что эта квартира перешла в мою собственность по договору дарения . Когда мы были в законном браке муж мне подарил свою 1/2 долю и квартира стала моей собственностью. В договоре дарения есть такой пункт , что с согласия двух сторон он остается проживать в квартире и имеет право пользования и не снимается с регистрации. Он добровольно уехал в другой город, но сам с регистрации сниматься не желает. Стоит ли мне подавать иск о признании его утратившим право пользования или не стоит заморачиваться , т.к. этот пункт в договоре дарения не позволит суду удовлетворить мой иск.