[請益] 房屋仲介問題 請問這樣會有法律問題嗎?

最近小弟看了一個還不錯的社區, 一開始看中社區中的A屋 ,這間是房仲帶我們去看的
後來發現小弟的同事住在這個社區當中,評價還不錯因此對此社區更感興趣

我們請房仲在一次帶我們去A屋,在次帶看的同時遇到了同事,同事表示他的鄰居最近也想賣屋,結果這段對話被仲介聽到
我同事本來就有意思要直接帶我們去找屋主談看看

但是就在我們第三次約看A屋的同時,仲介表示已經跟B屋的屋主取的委託可以一起看屋,所以我們就傻傻的被帶去看了A/B屋

目前問題是我們透過同事已經聯絡到B屋的屋主,他的售價若不含仲介費是在我們的預算當中,但是如果屋主將仲介費也加入賣價當中會超過我們的預算

屋主也表示如果我們喜歡他是可以去跟仲介解約,但是我們被帶看過,是不是還是無法避免要給仲介費無法私下交易?
仲介本來是不知道這間房屋要出售,是因為透過我跟我同事才得知訊息,這樣如果我們不透過仲介交易,是否會有法律上問題

難的看到喜歡的房子卻可能因為仲介費用無法成交,覺得有點低落,想問看看大家是否有機會談成
感謝