매도하는데 디딤돌대출 불가시 계약금 환불 특약과 중도금 없는 계약해도 될까요?

지방 소도시 아파트 (5억대) 매도하는데, 매수자가 디딤돌대출을 받아야 한다고 합니다. 특약사항에 디딤돌대출 불가시 계약금은 환불하는 것으로 문구 기재를 요청합니다. 대출 불가 사유가 매수인에게 있는 경우 환불 할 수 없다고 추가해서 넣자고 했으나 그건 할 수 없다고 합니다. 디딤돌대출만 받겠다고 합니다. 그리고 대출 승인 시기가 4주 정도 소요된다고 4주