近所の5人兄弟の家庭が勝手に私を公園での見守り&お世話係にしてきてつらい

近所の5人兄弟の家庭のうち、
我が子と同い年の子の公園での見守り？お世話係？ 
を任されてるような流れになってて焦ってる。 
母親が仕事してて赤ちゃんもいて忙しくて大変なのは分かるけどさ、
低学年の子に４歳児の面倒も見なさい
って公園に放り出すのは早いんじゃないの？