如若能够提供确凿证据，证实对方确实存在违约行为，而该行为导致我们所签订的房屋买卖合同无法顺利执行，此时便可向其提出退回定金之诉求。值得注意的是，这一过程中应遵循我国现行《中华人民共和国民法典》（以下简称“民法典”）中的规定，即根据第五百八十七条的法律条款，当作为债务人的一方履行了债务时，定金应当被视为价款的一部分或予以收回；反之，如果给付定金的一方未能按照约定履行义务，导致合同目的无法实现，则无权请求返还定金；同样地，若收受定金的一方未能按照约定履行义务，导致合同目的无法实现，则必须双倍返还定金。

《民法典》第五百八十七条债务人履行债务的，定金应当抵作价款或者收回。给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金;收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。