仲介業者から売り主へ交渉先変更は可？

[パラオ]

現在、新築建売を中心に購入を検討し始めた者です。
インターネットでめぼしい物件をピックアップし、プリントアウトしてから仲介業者へと出向きました。
ピックアップした物件の一つが、その仲介業者の取扱物件ではなかったのですが、念のため案内できるかと聞いてみたところ、案内できるとのことで、実際に現地へ案内してもらいました。
ただ、再びインターネットで調べてみると、その物件は売り主も直接販売を行っていることが解りました。
こうした場合、最初に案内してくれた仲介業者を断って、売り主と直接交渉しても問題ないのでしょうか？
買い手としては仲介手数料が約１５０万円ほど節約できますので、売り主と直接交渉にしたいのですが、まだその物件に決定したわけではないので、今後もその仲介業者とはお付き合いしたいとも思っています。（営業の方は非常に良い方でしたので…）。
上手な断り方や、なにか良い方法があればご教授頂きたいと思います。