住宅ローンが借りれない

先日、新築で一戸建てを購入しようと売主と話を進めておりました。
住宅ローンの申請を2つの銀行にしましたが、二つとも審査が通りませんでした。
何が通らない理由なのか分からないため、今後もローンが組めないのでは･･･と悩んでいます。

ちなみに今回は、建物条件付で土地建物あわせて4070万円。
今は私名義の分譲マンション（現金で購入のため残債はゼロ）に住んでいます。
他に主人名義の分譲マンションもあり、こちらは残債が550万円。
今回、マンション2つを売却予定でした。もし売れなければ売主が２つとも下取りをしてくれることになっていました。
６００万円と１２００万円で、合わせて１８００万円。
うち、５５０万円を返済に充てて残り１２５０万円を４０７０万から差し引いた２８２０万とその他諸々を含み、３０８０万の借り入れ申請でした。

主人は３年前に転職しており、昨年まで契約社員で今年に入り正社員になりました。

しかし、二つ銀行からは断られた理由を、売主も知らないですが、カードなどの延滞などが審査が通らない理由としては多いです･･･と言われました。

私たちの記憶にあるのは、昨年主人がカードを作りましたが、引き落としになると思っていたのが手続きが間に合わず、振込になっていましたが、振込用紙に気づかず振込みが遅れたことが１度だけありました。

それ１度くらいです。

どうなんでしょうか・・・よろしくお願いいたします。