実家の近くに住宅用の土地を探していたところ、ご近所の方がコンサルタント会社を通じて、所有する土地を購入しませんか、と申し出を受けました。
立地、広さ等ちょうど良かったので、建築条件付では無いことをコンサルタント会社に確認をし、購入の意思を伝えました。
するとコンサルタント会社が不動産会社をつれて来たのでそれ以降の手続きは不動産会社と行なうことになりました。
不動産会社にも再度、建築条件付でないことを確認し、売買契約を結ぶとき、ローンを通す目的と、住宅用の土地だと証明するために覚書に署名してくださいと（先のコンサルタント会社に工事をお願いします）と書かれた紙を１通渡されました。
どこで建てるかはまだ決まっていないと伝えましたが、「ただの覚書ですし、法的束縛はありませんよ」といわれ、サインをして渡し、土地の売買契約は成立しました。
その後、別の設計事務所に依頼することが決まったので、その旨不動産会社に伝えたところ「解りました。こちらからコンサルタント会社に伝えておきます」と言われ、３ヶ月が過ぎました
その間何の連絡も無かったので、特に問題も無かったのだろうと思っていたところ
先日、不動産会社とコンサルタント会社が着て「覚書まで書き、そちらから工事を依頼したのに一方的に契約を破棄したのでこちらが受け取るはずの報酬として、これから建てる工事代金の５％を支払って欲しい」といわれました。
コンサルタント会社とは不動産会社に引継ぐ前、２度ほど土地の説明を受けたのと、ローンを通すためのラフ図面を書いてもらっただけなのですが
工事代金の５％も支払う必要があるのでしょうか？
そもそもローンを通すために書いた１通（こちらに控えもありません）の覚書が建築工事請負書とみなされるのでしょうか？
アドバイスをどうぞ宜しくお願い致します。