セックスレスを解消したいです

5年の交際を経て昨年の秋に結婚しましたが、数ヵ月前からセックスレスの状態です。(私28歳、夫37歳)
結婚前から同棲をしていましたが、セックスの頻度は月に数回で、私から誘わなければセックスはほぼしていませんでした。
ある時から、セックスをしても彼がたたなかったり、途中で萎えてしまうことが多くなり、私から誘っても「疲れているから」「そういう気分ではない」と言って断られてしまいました。
私はそのことが悲しくて泣いてしまい、夫は「ごめん、これからは断らないようにする」と言ってくれました。
その後は断られないこともありましたが、夫は無理にしてくれているのが伝わってきて虚しい気持ちになりました。
また、セックスを断られることで私の機嫌が悪くなり、ケンカのような状態になることもありました。
私は「なんで、私とセックスしたくないの。セックスがすくないことは問題だと思っている」と言いました。夫は「性欲がなくなってきている。セックスの頻度が少ないことを大きな問題とは思っていない」と言いました。ここが私たち夫婦のズレだと思っています。

普段の生活は、たまにケンカもしますが、それなりな仲良く過ごしています。
でも、夫がいない時に、私は女としては見られていないのではと思うと悲しくなり涙が出てきます。
将来は子どもがほしいと思いますが、このままでは無理なのかもしれないと思うとこれでいいのだろうかと思います。
でも、夫のことは好きなので別れるという気持ちはありません。
どうやったら、セックスレスを解消できるのでしょうか。もしくは、夫に性欲がないという状態は変えられないので、私はどう変わればいいでしょうか。