父亲出轨后，将唯一房产卖掉后的金额平分。假设父亲只有养老金，我需要给他多少赡养费？是否可以拒绝给他？