我家亲戚势利眼瞧不起我家人我该怎么办？

我家亲戚都挺有钱，不是做生意的就是当官的，而我家人就是普通老百姓，都是打工族，所以每次家庭聚会的时候我家亲戚就会骂我啥也不是，没能耐，骂的很难听，包括我爷爷也是，瞧不起我们家人，明天是中秋节又要去聚会了，我实在是不想去了，真的不愿意被他们骂，请问像我这种情况应该怎么办，以后还和这些亲戚来往吗？