下着としてブラジャーをつけている男性の悩みを聞いてください。

自分がパンティと言うのは、それがとてもわかりやすい呼称であるからです。

パンツはもう論外ですよね。
アウターなのかインナーなのかさえ分からない。
少なくともアパレルでパンツはアウター以外では使う事がありませんからね。

で、パンティと言えば、それがインナーでレディースと一発でわかる便利な単語。
若い人にはどう聞こえるのか知らんが、何のエロ要素も差別感も感じない。

嫌がる人は何か後付けでそう言った知識を植え付けられたんでしょうね。

自分は毎日穿いていますので、慣れ親しんだパンティと言う呼称を使います。
他人がどう言おうと関係ないです。