以前付き合っていた彼女に、お金を借りていて、自分が放置状態、音信不通、にしてしまい、相手が怒ってしまいヤクザに頼んで、今現在住んでる所に来て、一括返済、借用書にサインしたのですが、そのときに信用が出来ないと言われ、同居人にもサインさせられてしまい、キャッシュカードもあずけてしまい、どうしたらよいか混乱してます。

警察に相談したほうがよいでしょう。
キャッシュカードは止めた方がいいでしょう。