法律分析：

购房的时候可以要回定金的情况有：房屋出卖人一直不交付房屋；房屋面积与合同有重大差距；房屋的主体结构质量有重大问题；房屋出卖人明确表示不再履行合同义务等情况。

法律依据

《民法典》第五百八十七条

债务人履行债务的，定金应当抵作价款或者收回。给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金；

收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。

《民法典》第五百八十八条

当事人既约定违约金，又约定定金的，一方违约时，对方可以选择适用违约金或者定金条款。

定金不足以弥补一方违约造成的损失的，对方可以请求赔偿超过定金数额的损失。