焦虑症心理测试：探视权的问题

离婚两年孩子四岁随我,男方一年能看孩子两次左右平常几乎没有电话联络,孩子的爷爷奶奶对这个孩子更是不论不问,孩子的爷奶身体都很好的时分也不关心这个孙女,咱们离婚后更是不问不看乃至连个电话问好都没有,现在孩子的爷爷生病了,他家的儿女想让孩子去看看(这期间孩子奶奶身体很健康,历来没来看过孩子连个电话都没有)所以我不同意孩子去看他们,他们想看孩子自己来看,我不会把孩子送去给他们看,我这样做对吗?请专家点拨一下。