무면허 교통사고 후 피해자가 합의없이 계속 배상금을 요구합니다. 어떻게 해야할까요?

제가 작년 10월초에 사고를 냈습니다.(무면허) 사고로 피해자분이 전치 6주의 진단(디스크)과 어깨 3주 정신과 6개월 진단이 나왔고, 형사 합의를 위해 형사합의금으로 500만원을 제시했지만 1000만원의 형사합의금을 요구하면서 형사합의가 이뤄지지 못하고, 형사처벌 500만원 벌금의 약식명령이 나왔는데 피해자 측에서 탄원서를 제출하여 정식 형사 재판을 받게되었고 300만원을 공탁을 하고 최근 3월23일에 500만원 벌금형 판결을 받았습니다. 여기까지는 형사적인 부분입니다. 피해자 분이 경륜선수라고 하고 이미 자동차보험의 책임보험 대인배상금 한도가 병원비로 다 끝났다고 하며 그 이후로 발생한 배상금은 제가 부담을 해야 한다고 합니다. 근데 그분이 작년 12월말까지는 경기(경륜)를 다 나가시고 1월달에 허리수술(시술로보임)과 정신과를 다닌다는 이유로 경기를 계속 안 나간다고 합니다. 이 부분이라면 피해자분이 휴업손해가 발생한다는데 1월부터 지금까지 계속되고 있으며, 보험사에서도 노력은 하고 있지만 담당자가 혀를 내두를 정도로 말이 안통한다고 합니다. 저한테 3월23일 판결 당일날 전화를 해서 심한욕설을 하며 같이 죽자고 죽여버리겠다고 했습니다. 너 죽이고 나도 죽겠다고요. 이런 상황을 어떻게 잘 해결할 방법은 없는지 궁금합니다. 시간이 지나면 지날수록 부담해야할 금액이 계속 늘어난다는 스트레스가 엄청 심하네요...