Поскольку пояснения бывшего владельца против вас, нужно устанавливать обстоятельства сделки и ваше последующее владение домом как собственным, по другим доказательствам. Возможно, есть свидетели, которые присутствовали при сделке (хотя именно в доказательство факта заключения договора купли-продажи их показания суд не примет, в силу прямого запрета ст. 162 ГК РФ — возможно, они могут наоборот, опровергнуть утверждение ответчика — о том, что он пустил вас пожить — указав, что такого точно не было и договоренность была другая). Возможно, есть косвенные свидетели, которым вы или прежний хозяин (лучше чтобы это был он) рассказывали о приобретении дома сразу после сделки. Лучше, если есть другие доказательства, письменные, которые подтверждают, что бывший хозяин не принимал мер, которые ожидаются от собственника.
В вашей ситуации лучше всего иметь юриста, который очно изучит обстоятельства дела и имеющиеся документы, при недостаточности доказательств поможет в их сборе.