住宅ローンの審査が不安です

49歳の公立病院に勤務する医師です．
昨年の税込み年収は1800万円で，現在は妻と中学生の子供2人の4人暮らしです．
この度住宅を購入しようと頭金600万円で残りの2800万円を15年で返済する住宅ローンを利用しようと思っております．
しかし，恥ずかしながら私には過去に消費者金融の借り入れ履歴が2件あります，いずれも平成20年以降は利用がないのですが，それまでの金額が200万円と多額であったため、完済解約したのが昨年の10月と本年の2月になってしまいました．また，クレジットカードは4枚所有しておりますが，そのうち2枚にキャッシング枠があり，現在カードローンの残債が130万円あります（これにつきましては今月返済予定です），そのほかにはローンはありません．また，今までに支払い遅延や延滞などの事故もありません．
先日JICCとCICから個人信用情報を取り寄せて確認しましたが，やはり事故歴はなく、消費者金融の利用履歴とクレジットカード4枚の借り入れ情報の記載だけでした．

しかし，ネットの情報や，先日20000円弱でダウンロード販売されている住宅ローンアドバイザーなる方の住宅ローンの手引き書のようなものを購入して読んだ限りでは，消費者金融からの借り入れは（特に年収が多いと）審査には不利で延滞などがなくても1件でも履歴があれば通らないくらい厳しい状況であると書かれていました．また，カードローンの残債もマイナス要素だとも言われています．

こういった状況，条件での住宅ローンの借り入れはやはり困難なのでしょうか？いろいろな金融機関があり，審査がそちらにゆだねられている以上、正確なところは不明だと思われるのですが，こういう状況で少しでも有利になるように審査を進めてもらうためにできることが何かありますでしょうか．
5年たてばJICCから借り入れ履歴は消えるらしいのですが，年齢も重ねてしまうため，年内をめどに動きたいと思っております．
大変お手数ですがよろしくご回答をお願いいたします．