【謎記憶】急に兄が私が17年程前に父親のお財布からお金を盗んだと言ってきた。そんな事してないし父も私を叱った記憶はないと言うが、兄は「父親と私が覚えていないだけ」

私、29、一人暮らし
兄、30、一人暮らし

今、実家に帰省しているのですが、昨晩兄と喧嘩しました。
原因は私が15〜17年前に父親のお財布からお金を盗んだと言っています。
しかしそんな記憶はなく口汚く否定しました。ヒートアップして埒が明かないので
父親を起こしてきて、私、兄、父親、母親で話し合いました。
父親いわく「お財布に絡むような何かがあった気がするけど
それを私に叱ったという記憶はないしそんな事があったなら覚えているはずだから恐らく兄の記憶違い」
ちなみに父親はこの話を聞いて西陣織の折りたたみ財布のようなものを
イメージしたらしいのですがそれが何だったかは思い出せないらしいです。
それは父のものでなく祖母のものだったそうです。

どういう状況か分かりませんが人の財布に触るような事が
あったという事だけでショックでしたし当事者が覚えていないのがよくわからないです。
兄は現場に居た訳ではなく私が叱られているところを見ただけらしいので
記憶違いを認め謝ってくれたのですが「父親と私が覚えていないだけで
そういう事があった可能性がある」とボソッと言い
また言い争いになりました。

兄は一人暮らしの部屋に帰ると言ってましたが私もアパートに帰りたい気持ちです。
しかし病気で自宅介護中の祖父はもう長くなく、今家を出れば次は会えないかもしれないので踏みとどまってます。
兄も恐らく同じ気持ちでまだ部屋から出てきていません。

兄とは顔を合わせる度に嫌なことを言われるので縁を切りたいです。
兄はニートだった期間が1年あり、その時に家族は兄を甘やかし放題だったのも引っかかっています。
検査はしていないのですが兄は多分アスペルガーです。