難解的感情問題

我喜歡一個人已二年多了
從很不熟
到漸漸熟悉
他是我同班同學，以A男代替
這學期變成他比較會找我說話
但，他說話有點機車
所以，每次我們都沒聊到什麼
我覺得他好像有些喜歡我
現在的問題是，一直有傳言我跟另一個男生在一起(以B男代替)
但，即使我一直澄清也沒用
問題是，昨天我在寫報告
B男一直在等我
我沒問他為什麼等我
就讓他一直等
而A男跟我說一下話就走了
其實，B男等我或幫我弄東西已不是第一次了
曾經想要排拒
但，後來想想我們也只是同學互相幫忙罷了
不必要為了別人的閒言閒語而在意
而且，怕說出來對B男不好意思
我也不大了解B男在想什麼
只是覺得這種感覺很怪

可是，昨天好像太超過了(因為他不是我的誰，等我?
怪怪的)
因為，我在乎A男的想法
他常常開玩笑說我和B男在一起…等等
我現想了解的是，如何減少誤會?
且和B男保持拒離
因為我和B男是同實驗室的關係
所以，比其他同學更常見面
另外，如何和A男有進一步的認識
我承認我被動了點，可是目前問題是B男