週に1回義実家に行って義母と一緒に庭造りをしてるんだけど、義兄の奥さんに「空気読んで欲しい」と怒られた。

相談させてください。
私の義両親は超良義両親で、特に私は義母の人となりを尊敬している。
義母に教えて貰ったガーデニングが私も楽しくて、
週に1回くらいの頻度で義両親宅に行き
一緒に庭造りをしてるくらい良い関係を築けていると思います。
でも先日義兄の奥さんにもう少し空気読んで欲しいと怒られた。

義兄嫁が義両親宅に行くのは年に１回くらいなので、
私が高頻度で義両親宅に行くのは義兄嫁の評価が下がるといった事らしい。
趣味がたまたま合ってたので、と伝えても
私の気持ちをもう少し考えて欲しいと言われてしまった。
義母は特に気にしてないと思うし、
年に１回みんなで顔を合わせる時もみんな仲良くしていたので
多分義母が義兄嫁に嫌味を言ったりしたという事はないと思います。
私としては急に庭の手入れに行かなくなると義母も気にすると思うし、
我が家はアパートなので庭も無いから義母宅で趣味を続けたいのですが、
義兄嫁の気持ちも仲間外れにされてる様に感じるのかな？と少しわかる気もするしで、
どうしたらいいか悩んでいます。