義母に孫を見せに行かなかったら母に怒られた。自分だけ会うのもなんだから控えると

先日、母が義母と偶然会ったらしく孫(生後半年)の話になり「大きくなったよねー」と話したら義母が「私、まだ写真しか見てなくて」と言ったみたいで母親にかなり叱られた
義母は嫌な人ではない、というか嫌とか好きとかの感情湧くほど会ってない
元々人付き合いが嫌いで義実家行くのも育児疲れもあって無理だった
母からは「自分だけ孫に会うのもなんだからしばらく控える」と言われた
私、そこまで言われるようなことしたのか