被新人在背後亂說閒話還無中生有

最近來了兩三個新人，我們是同部門，但又分成兩個小部門，其中跟我在同個小部門的新人(我們稱他A)跟我說，其實另一個小部門的那個新人（我們稱他B)都一直說我壞話，但我B工作上幾乎沒交集也很少說話，剛進來的第一個禮拜，這兩位AB新人詢問我私人問題，剛開始我以為是大家友好單純聊聊天，但也很短的聊天，問對方之前工作做什麼呀或是有沒有另一半呀，結婚了嗎有小孩了嗎之類的一般閒聊，大家都客客氣氣的，沒想到就是那天下班，B跟A說我怎樣怎樣的，說我一臉看起來就不是正宮，不然就是我另一半外面肯定有外遇這類話話，當我得知後我只覺得莫名其妙也很生氣完全無中生有...起初覺得算了嘴巴長在他身上，結果一天一天的，我只要做什麼他都會觀察，我只要跟別被同事說話，B就會去跟A說，我趁A不在的時候說A壞話，請A要小心我，連我本來個性就比較安靜一點也不太主動去閒聊除非有人問我或是有人想聊天我會搭個幾句的，B也可以說我看起來安靜所以心機很重，B也會偷偷經過我後面偷看我在傳什麼訊息，我覺得好笑的是，我跟B很少交集..連工作也是，知道這些事情後我變的更少跟B說話，本來就很少了，現在基本上不說話，除非真的要工作上需要說到話才會，但B也常常表面要跟你好想來找你說話，但通常我都很冷淡，其實B讓我上班很痛苦，覺得很多事情B都能講都能無中生有，明明沒跟B說話，但B也可以把你再跟別人說的話的時候扭曲成他想扭曲的那樣….
已經有和主管說過，主管說會旁敲側擊觀察看看是否真的這樣，他說有可能是A在挑撥離間我跟B,這也是沒有不可能，但我覺得自己觀察下來B真的是個很不善良的人，B也常常在同個空間說另一個C的壞話，但另一方面又覺得A會把別人告訴他的事情來跟我講，是否這種人也要小心？我只覺得自己單純來好好上班，為什麼總是會出現這種同事？我好累，我該怎麼做？想聽聽大家的建議，謝謝。