Продажа квартиры по доверенности - "Где деньги, Зин?"

Добрый день! Очень нужен совет вот по какому вопросу. Извините, длинно.
5 лет назад я по генеральной доверенности помогла продать квартиру знакомому инвалиду. Т.е. он был доверителем, я - доверенное лицо. Квартиры была продана, деньги из ячейки я забрала и отвезла доверителю домой (человек редко выходит из дома по здоровью). Время прошло, я уже забыла про эту истоию. Надо было - помогла, т.к. имела опыт продажи своей квартиры, человек мне доверял больше, чем риэлторам. Сразу оговорюсь, что я НЕ риэлтор и ВСЕЙ кухни с недвижимости не представляю совершенно. Моя задача была съездить на сделку (заложить деньги в ячейку в банке), подать вместе с риэлтором покупателя документы в регпалату, получить деньги из ячейки по окончании сделки и привезти их доверителю.
Теперь, по прошествии почти 5 лет, доверитель мне заявляет - "верни деньги". Типа никаких денег я ему не отдавала! Если писать без эмоций (а они зашкаливают) - что делать? Деньги я отдала без расписки, просто "в руки". Что с ними дальше делали - без понятия. У меня нет доказательств, что я их отдала владельцу квартиры. Он что, реально может в суд подать и мне придется эти деньги возвращать??? Какие могут быть основания запустить такое "дело" в судопроизводство?
Да, к слову, человек состоит на учете в ПНД, на момент продажи квартиры была получена справка, что человек дееспособен. Но, при этом, как я узнала от его родственников, последние 2 года очень много выпивает :(
Помогите, что мне делать?