離婚すべきか？子供のためには？？

3歳の息子を持つ３１歳の主婦です。４０歳の夫が浮気をしました。体の関係まではないようなのですが浮気ではなく本気ということらしいです。
私のことが嫌いになったり大きな不満があるわけではないというのですが相手女性と別れられないようです。
私は、私と相手女性を比べて相手女性と別れられないなら離婚しかないと告げたら相手と別れられないと言われました。
子供の手前もあってか険悪な雰囲気はありません。浮気が発覚して離婚の話が出てからも休日を家族３人で楽しく過ごしたりしています。夫婦ではだめかもしれないけど子供のために家族としてならやっていけるのか？一瞬そんな考えがよぎります。
でも、どうしても女として他に女性がいるのは許せません。でも、パパも大好きな息子にはやはり父親がいたほうがいいのでしょうか？
今は、最後の賭けで息子と一緒に私の実家に帰ってきました。夫も息子は可愛いので思い直してくれたらという思いです。
しかし、息子は可愛いけどやっぱり彼女とは別れられない・・そんな気がします。
果たしてこのまま離婚していいのか、自分の気持ちを抑えたりどうにかして離婚だけは避けた方がいいのか・・？

同居していた夫の両親は私が家を出た日に夫が浮気をしていたことを知りました。孫のことがとにかくかわいくて、義父が手紙や電話で、「冷却期間なんだろ、夫が相手女性と別れればそれでいいんだろ、孫は私たち（夫の両親）に会いたいと言ってないか、孫がいないと寝れない、涙が出る」というような訴えをしてきます。祖父母としての気持ちはわかりますが今の私には気持ちが重いというか正直うんざりです。このまま戻ったとしても可愛がり過ぎて私が禁止していること（お菓子やおもちゃの制限）も破られてしまうんじゃないかと思うと戻りたくないなと思ってしまいました。

自分のことを思うのか、子供のためを考えるのかよくわからなくなってしまいました。でも、子供のためを考えたらどうするのがいいか悩んでしまいます。
何か、意見やアドバイスがもらえればと思います。