要具体看合同怎么约定的，如果双方约定了对方违约不退定金那么可以不退，如果收方违约了，根据法律规定是需要双倍返还定金的。具体还要看合同约定和具体情况。
3、双方都有违约责任的，应当各自承担责任。
《民法典》第八章违约责任
第五百七十七条【违约责任】当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
第五百七十八条【预期违约责任】当事人一方明确表示或者以自己的行为表明不履行合同义务的，对方可以在履行期限届满前请求其承担违约责任。
二、所有定金都是双倍返还么
1、定金合同要合法且成立。如果想要定金罚则得以实现，那么定金合同就必须合法且成立。定金合同是依附于主合同，为担保债权实现而设定金钱权利义务关系的从合同。也就是说，定金的产生、变更和消灭都是依赖于主合同的产生、变更和消灭的。定金合同作为从合同是不能独立存在的。此外，定金合同属于实践性合同，即定金合同从实际交付定金之日起才会生效。需要注意的一点是：定金合同必须以书面的形式呈现，口头上的约定是无效的。只有定金合同的合法和成立，才能保证双倍返还定金的罚则能得以实施。
2、违约行为与合同目的落空之间要有因果关系。违约行为或合同未能实现，不是导致双倍返还定金的必然结果，只有二者同时具备且存在一定的因果关系事，双倍返还定金的罚则方可适用。也就是说，如果存在因为违约行为导致合同不能正常履行的情况，才能双倍将定金返还给支付方。
3、存在违约行为。首先，定金罚则的前提是有违约行为的出现。这里指的违约行为是根本违约行为，也就是导致合同无法履行的违约行为，其中包括了不能履行、迟延履行以及不完全履行等多种形态。出现这样的违约行为，才能双倍返还定金。
依据法律规定，定金依法不该退还，如果是以完成合同的目的给的定金依法不该退回。如果是收定金一方违约两日，给付方可以依法提起诉讼要求对方赔偿2倍的定金。了解《民法典》关于违约责任的法律法规。以及违约定金的赔偿情况。
延伸阅读：
给付定金的一方不履行约定的债务的，无权要...
根据我国《民法典》规定：“当事人既主张约...
给付定金的一方不履行约定的债务的，无权要...
