没有单方想解除合同还去起诉的 ,如果买方交付的4万元是定金,看你叙述好像写了预付款,这还好办些,。如果写了定金你违约是需要双倍返还的啊 ,现在这种情况最好能和平解决 ,你违约人还去法院起诉 ,这不是真成了恶人先告状了吗 。你以为司法途径那么好走哇 。