一般情况下贷款不成应当双方互相返还有关款项。互不承担违约责任。当然，具体要看你们的合同细节。
中介费就比较麻烦了，现在中介机构不讲诚信。你们应该还有一份中介合同，这份合同中，贷款的责任肯定不是中介承担的。按照一般的中介合同，你们买卖合同签订以后，中介的任务就算是完成了，就应当支付中介费。
但是你如果有证据可以证明中介公司的虚假承诺，从因欺诈导致你们意思表示不真实的角度要求撤销这份合同。