被人冤枉怎么办

单位有个人被偷了钱（疑似），当天只有我一个人有坐过他位子的时间，那个人一口咬定是在单位掉的钱，现在那些同事都怀疑是我做的，一个关系比较好的人告诉我的，我该怎么做呢，是保持沉默是否会代表默认，还是去争辩是否会越描越黑呢，因为并没有人明确怀疑是我，只是他们暗地里这样说，我去争辩的话，也许会有此地无银三百两的意味。