転職すべきか悩んでいます。

私は35歳、既婚・子なし女性です。
昨年9月に転職し、再度転職を検討しています。

昨年、結婚を機に転居することになり、転居先で15名ほどの小さな会社で総務経理事務（正社員）として働いています。

当初の話では経理業務をメインで行うので、経理の知識を深堀できると聞いていました。これまでにも経理業務には少しだけ携わっていましたが、さらに経験値を上げられると期待していましたが、実際は仕事をあまり与えてもらえず、手持ち無沙汰な日が続くことが多く、知識を深めることは難しいと感じています。
自分から仕事を見つけたり、何か手伝うことはないか申し出たりしていますが、それにも限界があり、掃除や棚の整理などをして過ごすことが多くなっています。上長にも相談してみましたが、あまり取り合ってもらえず改善する見込みはなさそうです。

暇で給料がもらえるなんて贅沢な悩みだと思われるかもしれませんが、働く以上は何かしらスキルを身に付け成長したいと考えていますので、仕事がない現状がとても辛いです。

仕事の無さに耐えられなくなってきた為、他の会社も見てみようと思い転職活動を始めました。
先日、大手銀行から内定をいただくことができましたが、有期（3年間）の契約社員での採用のため迷っています。（正社員登用はありません）
ここから数年間の働き方が、今後のキャリアを考える上で大事な時期と感じており、大手銀行のバックオフィス業務に携われることは、様々なことが経験できる環境であるため挑戦したいという思いがあります。

その一方で、契約満了の3年後、年齢的なこともあり転職できるか？という不安や、子供を望んでいることもあるので、契約社員より現職の正社員に留まった方が良いのかとも思います。
このような状況で、転職すべきでしょうか。