探視小孩

您好!
我的弟弟與弟媳離婚後，目前小孩監護權在弟媳那，探視小孩時也一直很順利，但自從弟弟過世後，弟媳的父親(或是弟媳自己?)常常會在我要去帶小孩回來看爺爺奶奶(因為小孩從小就是爺爺奶奶帶大，一直到5歲弟媳取得監護權才把小孩帶走，但是他們離婚前弟媳就已經離家2-3年，離家期間也都未回來探視小孩，只有在拿到監護權的前一年回來看小孩看得比較勤，弟弟去世後有跟弟媳談過約每2周帶小孩回家看爺爺奶奶一次)時常找藉口婉拒(例如:1.小孩在感冒咳嗽，不讓他出門 2.他爸爸要帶小孩出去 3.連小孩哭著要到我家過夜陪爺爺也不準，說他爸爸說小朋友在感冒不讓他在外面過夜?...等等)請問，這樣是可以的嗎?小朋友的父親已經過世，爺爺奶奶可以探視嗎?擁有監護權的一方可以拒絕嗎?