购房者在贷款购买房屋之后决定退房时，违约金的具体数额通常需由买卖双方协商商定，但若其认定过高或过低影响其权益，则可请求法院予以调整，以保障自身的合法权益。一经合同签署，当事人即有义务严格履行合同条款，否则将承担相应的法律责任。如果一方未能履行合同规定的义务，或者履行义务的方式与约定不符，给另一方带来了实际损失，那么损失赔偿金额应相当于违约行为所导致的全部损失，这其中也包括了合同履行完毕后可能获得的预期收益。

《最高人民法院关于审理商品房买卖合同纠纷案件适用法律若干问题的解释》第十二条
当事人以约定的违约金过高为由请求减少的，应当以违约金超过造成的损失30％为标准适当减少；当事人以约定的违约金低于造成的损失为由请求增加的，应当以违约造成的损失确定违约金数额。
《中华人民共和国民法典》第五百八十五条
当事人可以约定一方违约时应当根据违约情况向对方支付一定数额的违约金，也可以约定因违约产生的损失赔偿额的计算方法。约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。当事人就迟延履行约定违约金的，违约方支付违约金后，还应当履行债务。