Transferir Casa

Iba a transferir mi casa a un pariente y él me estuvo dando dinero durante un año el cual fueron 22,000 y otro año me dio 20,000 en efectivo pero al final en cuenta el fue el que se echó para atrás y ahora él quiere que le pagué yo, yo no firma de ni un papel ni nada porque él no quiso, yo quería desde que antes que me diera dinero a ser el proceso para transferir mi casa de dueño pero él se negó y todo fue a palabra mi pregunta es que si estoy yo obligado a pagarle el dinero que él me dio sabiendo que él fue el que le echó para atrás y él no iba a recuperar su dinero