示談内容が成立しない

まず相手の弁護士に聞いてみましょう。示談内容を守らない理由について問い合わせてみてください。その理由が転居できない正当な理由がなければ、示談内容を守るように訴えを起こし、引っ越さない場合は、金銭的賠償を求める方法がありますが、ご自身で行うのは大変なので、弁護士を委任した方が良いでしょう。
そもそも相手が逮捕された刑事事件は、どのような処分になったのでしょうか。もし、示談したことで不起訴になっていたら、示談が守られないことを検察官に告げ、事件を再起して処罰を求めるという方法もあります。
せっかくあなたが示談に応じたのに、それを守らずにいる相手を許す訳にはいきません。不起訴にされていたら、検察官に事情を話して、このままでは恐怖を感じると訴え、厳重に処罰してもらうのが良いと思います。