SNSでの精神的苦痛について

はじめまして。私は既婚者です。
あるSNSで同じ既婚男性と仲良くなり、そこからLINEなどのやりとりをするようになりました。ある日相手側の奥様にLINEの通話をしていることがバレてしまい、私のLINEに私に対しての悪口のようなコメントを入れてきました。しかし、バレたといえ、私は通話がダメだとは一切相手からは聞いていなかったのでその旨は伝えました。
SNSで知り合った当初から『好き』という言葉がありましたが、それには応えることができないと言い続けてきました。

その通話の件以来、LINEでのやりとりを奥様には内緒でやっていたようなのですが、不倫関係などはもちろん、逢ったこともありません。なので、私とLINEをやりたいのであればきちんと奥様に伝えて欲しいと言いました。
どういう言い方をしたのかはわかりませんが、相手側は離婚話にまでなったそうです。
そして、私には『一緒になりたい』と言ってきました。
うまくいかなくなれば『一緒になりたい』しかし、家庭も大事とあやふやな状態。
ハッキリして欲しかったのでどういう気持ちなのかを聞いたところ奥さまも私も好きだと言うことでした。

我が家は子どもはいませんが、夫婦仲はよくありません。
私は仕事のストレスにより精神疾患を発症し、先月いっぱいで退職をしました。
誰かに話を聞いてもらいたかったのは事実です。

散々、好きだの、一緒になりたいと言われ、段々と相手に対して好意が出てきているのは事実です。
しかし、いざとなれば家庭をとるってなった時の私の精神的苦痛はどうにもならないことなのでしょうか。

私は相手を好きになるのであれば、夫に申し訳ないので離婚しようと思っています。