首先，如果他没有对你尽到抚养义务，那么你也就没有赡养义务。当然这要根据具体情况而定。但是如果是你父亲主观放弃了抚养义务，事实也是没有尽到抚养义务，那么你就没有赡养义务。虽然我国“《婚姻法》第二十一条父母对子女有抚养教育的义务；子女对父母有赡养扶助的义务。
父母不履行抚养义务时，未成年的或不能独立生活的子女，有要求父母付给抚养费的权利。
子女不履行赡养义务时，无劳动能力的或生活困难的父母，有要求子女付给赡养费的权利。
禁止溺婴、弃婴和其他残害婴儿的行为。”
有这样的规定，但是由于权利与义务是并生的，不是单一存在的。没有无权利之义务，同样没有无义务之权利（这是我国宪法的精神）。有了义务必然要有权利，没有履行义务那么自然也就没有权利。换言之，如果你父亲没有尽到义务，同时也就意味着他丧失了权利。当然具体情况要具体分析。
其次，如果你成年了，就没有再要这笔钱的主体资格了。只有你的母亲具有。如果你不想对你父亲赡养，那么就没有必要去要那笔钱。