離婚する際に養育費を決めたときには、協議で決めたということでよろしいでしょうか。公正証書を作っていれば、養育費を支払わないとそれを基に相手は強制執行をかけてくることも考えられます。養育費の減額を交渉や調停でこちらから申立てたとしても、裁判所の使う算定表と比べてみて10万円という額が安ければ、こちらの主張はよっぽどの理由がない限りは認められないでしょう。
慰謝料については、そもそも慰謝料を払わなければならない理由(不貞行為など)があるのかどうかで変わってきます。慰謝料を払う理由がなければ相手が調停などをしてきても拒否すればよいでしょう。
借用書にサインしてしまったということですが、その借用書の内容は何だったのでしょうか。そもそも借用書としての体裁になっていなければ拒めるでしょうが、体裁があなたが金銭を借り入れるという内容であったのならば、脅迫されたなどの事情がない限り借用書の効力を争うことは難しいと思われます。