不倫。長文です。

主様、落ち着いて行動するべきですよ。
彼は仕事の同僚以上の感情はない、とはっきり言ってますよね。

あなたが誘っての肉体関係は、いわば彼にとっては「魔が差した」「据え膳を食った」
以外のなにものでもありません。

お互い家庭があり、彼が拒否しているのに、
追いすがる主様が異様に感じます。

これが釣りでないなら、家庭を壊す気がないと言いながら、明らかに相手の奥様に行動を
仕掛けるのは、つじつまが合いませんね。

妻は愛する失いたくない者であり、主様は職場の同志だっただけ。
立場をわきまえて、見苦しい真似は止しなさい。