不履行合同时定金怎么办

要看是哪一方不履行合同。
如果是给付定金的一方不履行合同，定金不予退还。
如果是收受定金的一方不履行合同，定金应当双倍返还。
依据我国法律规定，债务人履行债务的，定金应当抵作价款或者收回。给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金;收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。