涉及到按揭贷款购买房产的事宜，不希望购买并继续持有该房产的情况下，理论上是允许退回房屋整体的；在此过程中，我们需要明白按揭购买的房产在相关产权证书颁发以前，房屋的所有权仍然归属于房地产开发公司所有，也就是说所有权尚未得到有效转移。基于这一前提，即购房人与开发商之间的合同效力还未完全落实到位，购方有权利提出终止合同，并有权向开发商收集要求退还已支付款项的权利。

《最高人民法院关于审理商品房买卖合同纠纷案件适用法律若干问题的解释》第十九条
商品房买卖合同约定，买受人以担保贷款方式付款、因当事人一方原因未能订立商品房担保贷款合同并导致商品房买卖合同不能继续履行的，对方当事人可以请求解除合同和赔偿损失。因不可归责于当事人双方的事由未能订立商品房担保贷款合同并导致商品房买卖合同不能继续履行的，当事人可以请求解除合同，出卖人应当将收受的购房款本金及其利息或者定金返还买受人。