Бывший заказчик угрожает здоровью и жизни. Что делать?

Здравствуйте! Проконсультируйте меня пожалуйста. Я частный дизайнер интерьера. Когда вел переговоры по поводу заказа на дизайн с заказчиком, предлагал заполнить ему договор. Долго вели переговоры, в итоге договор не подписали, но я получил аванс на будущую работу. Решили сотрудничать. После 2,5 мес. работы и выполнения необходимого комплекта рабочей документации по цене аванса с авторским надзором, переговоры с заказчиком пришли в тупик. Неудовлетворенный проделанной работой он потребовал возврата суммы аванса. После отказа, поскольку работа выполнена, начали поступать угрозы жизни и здоровью. Заказчик,как оказалось,ранее судим. После чего всякий контакт с заказчиком в целях безопасности был прекращен. Спустя недолгое время, заказчик выследил мой адрес проживания через телефон и пришел на место с "поддержкой". Очередные переговоры ни к чему не привели. Физического насилия не зафиксировано. Но боюсь теперь за здоровье близких. В полицию тоже еще не обращался. Подскажите,пожалуйста,как грамотно поступить?