近距離義実家＋義兄家に、うちの息子を義兄の養子に欲しいとクレクレされてます。

相談です。
近距離義実家＋義兄家に、うちの息子を義兄の養子に欲しいとクレクレされてます。
うちは長女(3)と長男(0)、旦那(サラリーマン)、私(育休中)の四人家族です。
義兄は資格職で義姉は専業主婦。
義兄夫婦はずっと不妊治療していたらしく、治療のため義姉は有名企業を退社したそうですが、
残念ながら子供を授かれないまま40歳を超えてしまいました。
そのため、うちの長男を養子に欲しい、まだ産まれたばかりだから大丈夫だろう。
うちはお金があるから長男に高度な教育を施せるし、楽な生活をさせてあげられる。
そっちも子供一人なら私さんも専業主婦になれるだろうし、
楽になるんじゃない？と結構軽く言われてしまいました。

義両親も、ナイスアイディア！とかるーいノリで乗り気です。
私はもちろん断固反対。二人とも大事な我が子だし、自分たちで育てたい。
別に仕事を辞めたがってるわけでもないし、
二馬力ならお金にも困ることはなく身体も健康。養子に出す理由がありません。
しかし問題は、旦那がいわゆる次男はっちゃけして前向きに考えているということ。
もともと二人目は私の強い希望で作りました。

旦那は子供はできたら育てるけど別にいなくても良い、というスタンス。
だからって、自分の息子を兄にもののようにあげるのはおかしいと話し合い、
その時は納得はするものの、義両親や義兄夫婦と話すとすぐに洗脳されて帰ってくる。
義兄の養子になっても家族なのはかわりないし、二家族で二人の子供を育てるって考えればよくない？
と言われるそうで、その気になっちゃう。
義実家を大々的にリフォームして三家族で住むという話を持ち帰ってきたときはぶん殴ろうかと思ったほどです。
10年近くの不妊治療が実らなかった義姉が泣いたりしようものなら、すわ一大事と私を説得しようとしてきます。
久々の0歳育児＋長女の赤ちゃん返りに奔走されてる中でのくだらない言い合いに、すっかり疲れてしまいました。
私がきっぱり断っても、旦那が今みたいにふにゃふにゃしてたら、いつまでも経ってもこの話は終わらないと思います。
旦那の目を覚まさせるにはどう説得したら良いと思いますか？
ちなみに、血の繋がりは大事だそうで、養護施設などから養子をとれば良いという意見は食い気味に脚下されました…