相手方と離婚するときに、裁判所から保護命令などが出ていたのでしょうか。刑事事件としてのストーカー防止法の公訴時効は3年です。警察に動いてもらうには、彼の具体的な行為の証拠が必要です。民事で、一般的な不法行為に基づく損害賠償請求(慰謝料請求)をする場合には、時効は3年ですが、「生命または身体を害する不法行為」にあたれば、時効期間は5年です。彼が押しかけてきたとき、脅迫した時の証拠をできるだけ集めて、精神科や心療内科等に通院して、医師に、あなたの動悸や体の震えという精神的な症状が、彼の脅迫等の行為によって生じたという診断書を書いてもらえればよいと思います。