我同事的老婆很小市民，总是怀疑我和他老公

我现在是单身，一直找不到合适的，但我根本就看不上我的同事，也丝毫没有做人家第三者的想法，但是我的这个同事似乎很喜欢我，总是在创造机会能和我有所接触，我是能感觉的出来的，但是我们是同事，每天不见面不说话也是不可能的，所以他老婆就怀疑我和他老公有什么事情，并且还到处和别人乱说，另我很生气，怎么办呢？