北京大学应用心理学：老有人说我憨憨,甚至说精神病

小区的人老说我憨憨,甚至连小孩见了都说我憨憨,最近去开了点药,他人说我精神病,指桑骂槐的那种,还有当面说我憨的,好多人都成心孤立我,逃避我,还有的说孩子怎样怎样的,由于我离婚一个孩子也没带!我该不该予以反击,怎样反击?