こんにちは。
昨年９月に返済期間２０年1２００万円の住宅ローンを固定１０年２．４％で借入しました。固定後は４．５％、一部繰上返済の手数料は１回３１５００円です。

全貯金５００万のうち４００万を繰上返済にまわすかどうか悩んでいます。

■収入（年間）
夫３６歳　フリー　１５０〜２００万円
妻３０歳　会社員　手取り　３６０〜４００万円（内１５０〜２００万程貯蓄）

■購入物件
築２５年　中古マンション
購入時に水周り以外はほぼすべてリフォームし、水周りは１０年位前に一度交換されてます（お風呂、配管など）あと１０数年は大きな支出はない予定です。
ローンはボーナス加算なく月６６０００円位です。
■生活
車はなく、子供はいません。５年後くらいにはできればほしいです。
夫は結婚前に鬱病で退職後収入が安定しません。二人で働いているので自分のことは自分のお財布からという状態です。
夫の収入は鬱の再発が心配で０になる年も覚悟しつつこれ以上は限界です。
私の収入は今後増えるよりは年間手取り１００万以上あるボーナスが徐々になくなる心配があります。
この先世帯収入年間手取り３００万を想定して、余裕があるうちに早めにローンを減らしておくか、万一に備え貯金しておくか迷ってます。
手数料が高いのでこまめに繰上するよりは固定が終わる１０年後に一括がいいのか、また、一部の場合貯蓄がなくなる分月々の返済金額を減らした方がいいのか、返済期間を少なくしらたいいのかよくわかりません。いずれにしても１０年くらいで完済しておきたいのです。
また、そもそもこの収入で子供を予定している場合ローン繰上はやめたほうがいいのでしょうか。アドバイスのほど宜しくお願いいたします。