遺産相続における生前贈与について

先日、妻が逝去しました。
落ち着いたところで気になっているのは遺産相続のことです。
まだ財産整理をしていないので、金額はわかりません。
家族３人でしたので、相続人は夫である私と３歳の娘だと思います。
そこで、気になることがあります。
それは私が妻と結婚したのは、４年前なのですが、結婚前に自分の借金整理や結婚式の資金のために５００万円借りています。しかし、信用借り？という感じで借用書等は一切ありません。
結婚後も何かにつけて５００万円程度は借りており、トータルで１，０００万円は借りていると思います。
当然何十年かかっても返済する気はおりましたし、またこのような状況では、隠すことなく遺産相続手続きの際には計上するつもりでいますが、お金の移動事実（妻の口座から引き落とされて、私の口座への移動確認が記録されていればいいのですが、たとえば妻の口座からの移動はあっても私の口座への移動記録がないとか）を証明するのが難しい時や結婚前の場合（結婚の約束はしていました。）のはどうするのか？
教えていただきたく願います。
また、相続税については７，０００万円は非課税であり、該当しないとは思いますが、何か本件で手続きする必要があるのでしょうか？
いろいろ調べていたら税務調査があると聞き不安になっております。
証明できるような書類がないだけに今更後悔なのですが、ご教授のほどよろしくお願いいたします、