奥さんは子育て大変な時期
その上で旦那の面倒見られないってことでしょ

3人子ども生んでるのに今さら旦那の障害がどうのこうのなんて理屈でしょ
数年たって落ち着けば気も収まるとは思うよ
それまでの間、余裕があるなら別居してみれば