Здравствуйте.
Зависит от того, какого результата должен был добиться агент, а именно что указано в договоре. Если просто осуществить поиск квартиры (условно показать вам 1-2 варианта) то вознаграждение он может и не отдать, а если результат заключение Вами договора на квартиру по указанным Вами условиям, то агент вознаграждения не заслужил.
Обязательно требуйте предоставить Вам отчет агента.
Согласно ст.1008 Гражданского кодекса РФ
1. В ходе исполнения агентского договора агент обязан представлять принципалу отчеты в порядке и в сроки, которые предусмотрены договором. При отсутствии в договоре соответствующих условий отчеты представляются агентом по мере исполнения им договора либо по окончании действия договора.
Итог смотрите договор и отчет агента, если результат деятельности не соответствует условиям договора пишите претензию со сроком на возврат денег (вручайте лично с отметкой на втором экземпляре) или почтой с описью вложения. По истечение установленного Вами срока обратитесь в суд.