Смогут ли квартиранты подать на меня в суд?

Здравствуйте у меня такая проблема заселил людей в квартиру по рукописному договору, но в связи с жизненными обстоятельствами вынужден их выселить, предупредил заранее, а они говорят что пока срок по договору не кончится съезжать не намерены и подадут в суд, что делать подскажите пожалуйста