身体の相性悪いと言われ捨てられました。

40代後半になるとだんだん硬さを維持するのが難しくなってきます。初回は目新しさと期待かんで硬さを維持できても回数を重ねるごとに維持できなくなるというのは良くわかります。
硬さが維持できない状態でセックスするのは男性にとっては肉体的にも精神的にも苦痛になるので別れを切り出されたのも良くわかります。
セックスの時に硬さを維持させる要素は相手の膣の問題だけではなくて、喘ぎ声とか顔や体型で興奮できるかどうかも大事です。いずれにしてもすぐに変えられるものではないので、硬さを維持できる薬を使うのが一番簡単な解決策です。別れようと言われたのなら余程の未練がない限り別れてあげて正解と思います。