【相談】私は北九州出身だからか先輩に「お前の親はヤクザ、ヤクザの娘」と言われる。冗談のつもりだろうが気分が悪いので場を壊さないように言い返したい

質問です うまい返しはないでしょうか
私は北九州市出身で現在関東に就職しています
部署の飲み会の際毎回先輩に出身のせいで「お前の親はやくざだ やくざの娘だ」と言われることが辛いです
おそらく向こうも冗談でいっていると思うのですが、こちらとしてはすごく気分が悪いです
飲み会の空気を悪くしたくないので笑って流してはいるのですが、さすがにそろそろどうにかしたいです
なんとか二度とそのようなことを言わないように、また飲み会の雰囲気を壊さないように言い返す方法はないでしょうか
ちなみに親は一般の職業です。誇りに思っています