我的母亲于今年5.11在上海杨浦区中心医院过世，在进医院抢救之前一段时间我母亲与其男友同住。之前说好等上海疫情解封之后碰面归还我母亲遗物有但不限于银行卡，手机，身份证等。并且我母亲生前有借给两个人钱，欠条也在他那个男友手里。封控期间在5月中下旬这个男的问我要了一万块来付房租，我一方面念在他对我母亲有照顾之恩便给了他，而且期间也转过一些钱给他。也是为了能顺利拿到母亲遗物。现在上海已然解封期间和这个男的一直有联系，但一直以各种理由不见面。最后一次通话要求要我和我外婆还有他三个人会面，且还要我去联系外婆。因为在母亲去世后我与外婆和舅舅有矛盾，我并没有联系。他就一直不主动归还。请问如何处理

提示：法律咨询具有特殊性，律师回复仅供参考，如需更多帮助，请咨询律师。