彼氏が「○美が未経験だから付き合っている」と言いふらしてた

大学時代に彼氏がいました。
最初は興味なかったのです、猛アタックをウケ付き合うようになりました。

ある日、彼のいない飲み会の席で、彼と同じサークルの人から「あいつ、あちこちで○美が処女だから付き合ってるんだって言いふらしてるぞ」といわれました。

自分が処女だということを言いふらされたのもイヤだし何より、「処女だから付き合っている」という言い方がイヤだったので彼に問い詰めたところ、

彼は前の彼女が非処女だったのがずっとイヤだった。だから、私が処女っぽいと思い、それとなく私の友人にリサーチをして猛アタックをして、実際に処女だとわかって嬉しかったのでつい言いふらした。

悪意は無い、と弁解しましたが。 
その言い方が凄く言い訳がましく、しかも元カノに対しての誠意も見られなかったので「本当は私は非処女だから」と言って一方的に別れました。 

その後何度か連絡はありましたが、完全に無視しました。 

その後、今の旦那と知り合い、付き合いが始まった時に相手を試すようなことをしてしまったのですが、彼は私が非処女でも全然気にする様子は無く一緒にいて楽しい人と一緒にいたいと言ってくれ、誠意をもって付き合ってくれ3年後に結婚しました。

彼は私の名字が変わってないことを知ると、お酒の勢いもあるのか大勢の前で「こいつ学生時代から男を食いまくるヤリマンだったから未だに独身なんだよな。俺同じ大学だから知ってるんだよ（笑）」といいました。 

私の周囲の人は、たまたま同じ名字の男性と結婚したことを知っていたので苦笑いしていたのですが別の職場の方は困った顔をして、恐らく彼の話を信じてしまった人もいると思います。 

聞いた話では、彼は私に振られた後、あいつに裏切られた！女なんて信じられない！と激怒していたそうでその怒りが今になって再燃してきたのかもしれません。 

その飲み会の席は、今後仕事をしていくほかの職場の人も含めた懇親会の場なのでそういうところで平気でそういうことを言われてしまい、これからの仕事に関して上手くやっていけるかどうかもわからず 

また、元彼が何かとうちの持分について難癖をつけてきて、明らかに八つ当たりと思うことを繰返しています。 

来週の頭に再度全員で集まっての会議、そして恐らくその後の飲み会があると思うのですが私は一体その場でどう振舞うべきなんでしょうか？ 

同僚には「その席上で旦那のノロケでも言ってやればいいよ」と言うのですが、そんなことしてさらに彼が怒ったらどうしようかと悩んでいます。

どうしても誤解されては困る人達がいるなら、その人達には 
同姓だけど既婚である事の経緯を同僚から話してもらったらいい。 
その方が自分で弁解するよりよっぽど効果がある。 

その飲み会から外してもらうわけにはいかないの？

頻繁に会う人や連絡を取り合う外部の人にはさり気なく既婚で子供もいることは雑談の時に伝えているのですがそこまで頻繁に会わない人や直接連絡を取り合わない人もいてそう言う人にどう見られてしまっているんだろう？とちょっと怖くなったもので… 

飲み会は、一応打ち上げと称していますが実際には会議の延長のような部分もあるので、できるだけ参加しておいたほうが良い感じなので同僚の協力を得て、元彼とは一番遠い席においてもらったりするようにします。