遺留分の放棄をするならば会わせてもよいと半ば脅されている

ご自身の実母の方との間で遺留分の放棄が問題となっているという前提で検討しますと、

①遺留分については、ご自身のお父様が存命か否か、ご兄弟が何名かにもよりますが、法定相続分の１／２になります。

②相続開始前の遺留分の放棄には、家庭裁判所の許可が必要です（民法１０４３条１項）。
　しかし、お子さんとの面会は親の権利として本質的内容であり、面会の条件とすることは公序良俗に反するため認められないと思われます。
　なお、仮に遺留分の放棄が許可された場合、その後の事情の変化により、家庭裁判所に許可の取り消しの申立てを行なうことができます。ただ、当初の許可の段階で一旦家庭裁判所において放棄の合理性・相当性について判断されている以上、当然に取消がなされるわけではありませんので、注意する必要があります。

③どうしても実母の方との折り合いがつかない場合は、家庭裁判所に子の引渡しの調停・審判申立てを行なう必要があるでしょう。