それから毎月旦那が休みの日に訪ねて来て子どもを可愛いがりつつ世間話をして帰りに次の約束を旦那とするようになり、体が回復していない私はイライラが募って顔を合わせないよう外出するようになりました。
最初は月一で2、3時間だったのが気づけば2週間毎になり半日は居座っています。
今年の年賀状に子どもの写真を無断で使われたこともあり、非常識な振舞いに人として嫌気がさしたのでもう少し訪問の頻度を落としてもらえないかと旦那に言ったところ大喧嘩に。

旦那は義姉のおかげで外出できたのだから感謝しよう。子供のために善意で来てくれてありがたい事なのだから断るなんて有り得ない、頻度を減らす意味はない、病気だから嫌なのか、あんたは差別主義者だ！と言われました。
病気に関係なく非常識な振舞いが無理なのだと伝えましたが聞き入れてもらえません。

何か良い落とし所はないでしょうか。