赤ちゃんが生まれてから義両親が月に1～2回来るんだけど、義母の「忙しいのにごめんね」という言葉にイライラする。

良い言葉の返し方か気持ちの持ちようを教えて下さい。
赤ちゃんが生まれてから、義両親の訪問が月に1～2回のペースであります。
それ自体は問題ないのですが、義母の必ず言う言葉にイライラしてしまいます。
「忙しいのにごめんね」
この言葉は必ず言い、さらに以下の言葉を続ける場合もあります。
「私が来なければ日中に睡眠とれたのにね、ごめんね」
「私が来なければ洗濯出来たのにね、ごめんね」（連日雨降りで久々の快晴）
「せっかくの休みだったのに、来ちゃってごめんね」（主人が激務な時期でその日は久々の休日）
こう言われると来なかったら寝れるし、主人と久々の休日をゆっくり過ごせたのに、と思ってしまいます。さらに悪いと分かっててなお来るの？という思いが強くなってきてしまいました。
「忙しいのにごめんね」の返しに「いえ、大丈夫ですよ」と言うのが苦痛です。
これは思ってもないことを毎回言うストレスに耐えるしかないのでしょうか。