권리금 문제와 해결 방안에 대한 상담

안녕하세요. 우선 저는 매장을 운영하고 있는 자영업자입니다. 매장을 인수받으면서 일억 사천에 말도안되는 권리금에 인수를 처음에 받게 되었고 뭐에 눈이 멀었는지 저도 자신감에 인수를 받게 되었습니다. 처음에 돈은 다 지불하지 않고 진행했으며 한달동안 같이 운영해본결과 바로 눈앞에 결과가 나타났습니다. 순이익이 전혀 없이 운영되고 있었고 운영하면서는 거래처들에 안좋은 이미지와 거래처에서는 전에 사장이 깔아뒀던 미수금을 달라는 소리만 들려왔습니다. 미수금을 깔아뒀다는건 전혀 알려주지 않았습니다. 그때 이제 다시 전에 사장과 이야기해서 이거 나한테 1500이상 남는다고 하지않았냐. 사기죄로 고소해야되는부분이냐 아니면 조율해서 갈래 해서 다시 한번 조율을 하게 되었고 저는 인터넷 다음 카페를 6000만원에 구매하는 조건으로 (다음카페 회원수가 4천명이 넘어서 그걸 같이 구매해야만 운영이 됐기 때문에) 같이 구매하고 시설권리 + 보증금은 지불했습니다. 다만 카페에대한 금액은 바로 줄 수 없어서 차용증을 쓰고 집에 설정을 걸어놨습니다. 차용증에는 매달 6천에대한 이자를 지불하고 이 차용증은 권리금을 지급하는 것에 대한 차용증이다 라는 내용을 작성했습니다. 인터넷 카페 포함이요 근데 인터넷 카페에대한 명의는 바꿔주지 않았습니다. 돈을 절반이상 줘야 넘겨주겠다고 했습니다. 지금 가게를 운영하면서 남는것도없고 이러지도 저러지도 못하는 상황입니다. 6천만원에 대한 걸 지불할 수 있는 상황도아니고 이자에 대한 부분도 내기 벅찬 상황입니다. 제가 이상황에서 할 수 있는게 뭐가있을까요? 계약을 무효화시킬수 있을까요...