職場の先輩で気になってる人に、二人で食事に行きたいと誘ったら、「嬉しい、是非」とのことで食事行ったんだが、その後、先輩「今度からは他の同僚とかも一緒に行きたい」

長文失礼します。
20代女です。
職場の先輩で気になる人がいます。
何度か職場のグループで飲み会に行くことがあり、ラインでもよく話をしています。
先日、食事に誘った際に「別の同僚もよんでもいい？」と聞かれたので、「二人で行きたいんですが、いいですか？」と答えたところ嬉しい、是非、とのことだったので二人で食事に行きました。
そこではあくまで主観ですがいつものように楽しく食事ができたと思います。
少し進展したかなと喜んでいたのですが、その後先輩から今度からは他の同僚とかも一緒に行きたいと言われてしまいました。
なぜそのようなことを言われたのでしょうか
それなら二人で行きたいと誘ったときにそう言ってくれればよかったのにと思ってしまいます。
また誘うのはよくないなと思いますが、このままよくわからず終わってしまうのも嫌です。
グループでは何度も食事や飲み会に行っているので、少しでも仲を深められたらと思っての行動だったので、またグループで行くのは正直あまり気乗りしません。
何かアドバイスをいただけたらと思います。