【修羅場】前妻がジコで他界 →俺「葬儀に行きたい」息子＆娘『非常識でしょ？前妻のことは欠陥品になったから捨てたのに？』俺「あれは円満リコンだった！」 →

前妻が事故死し、葬儀に行きたいのですが息子と娘(現妻の子)が非常識だと怒っています 
夕方からなのですが…自分としては嫌いで別れたわけではないので
最後の挨拶に行きたいです 

現妻はあなたの好きなようにしなさい、と言っています 

子どもがほしかった自分と子どもを産めなくなった前妻といった
構図での円満離婚でしたが、 
それを前妻の姉の子どもが息子に漏らしたようで息子と娘からは
「欠陥品になったから捨てたんだね」と言われています 
それがあるからこそ今回非常識だと怒っているのだと思います 

自分としては行きたい、けれどこれ以上子どもとの関係を拗らせたくないで迷っています 
この場合、みなさまならどうしますか？