養育里親として子供を育てていたらいきなり実親が引き取りたいと言い出して辛い

養育里親として子供を育てており、子供が成人したら養子縁組をしたいと考えてました。
習い事やサークルに参加して、出来た友達に、家庭の話題になったり、子供は何歳？などと聞かれるので、子供が里子であることは伏せて、普通に何歳だよ、○年生になったよと話してました。
しかし、里子の実親さんが再婚して養育可能な環境になったらしく、引き取りたいと言い出して、児童相談所に子供を連れて行かれてしまいました。
子供が幼く一番手のかかる時期に育てず、人に育てさせたくせに、子供本人の気持ちを考えないで今更引き取りたいと言ってくる親の勝手さに呆れて怒りが込み上げます。
なにより、このままでは、私が子供がいると周囲に嘘をついてた形になってしまいます。
子供が里子であることを隠していたのは、我が子同然に思って養子縁組をする前提でいたからです。
市の法律相談で弁護士に相談しましたが、児童相談所や実親を訴えても慰謝料は取れない、里子を取り戻すのは難しいと言われてしまいました。
子供がいなくなったことを周囲にどのように説明すれば不審に思われないでしょうか？