長い文ですいません

結婚8年目、主人（45才）とはだんだんとセックスが減っていってしまって、
今ではセックスレス4年目となりました。子供はいません。
付き合う時点から淡白な主人ではありましたが、
（仕事は残業が多く、セックスよりも寝る方がいいみたいです）
何故か最中に突然立たなくなったり、インサートしてもすぐ私の中で萎える
状態となりセックスはもとより、一緒にお風呂に入ったりするのを
嫌がるようになりました。
下の毛に白髪が生えたと見られるのも嫌がります。
精力のつく食事や運動、サプリメントなど試しましたが、
彼のプライドからかそういうのもも一切受け付けてもらえません。
病院でカウンセリングを受けてもらいたくて話をしても、
黙りこんでしまいます。
浮気の可能性は、ほぼ無いように思います。

私は35歳で性欲もほどほどあります。気持ちを紛らわそうとして色々と
習い事などしましたが、そうするとますます性欲が増してきます。
かなり辛い時もあります。
夫婦仲はよいので（セックスレス以外では申し分のない主人です）
安易に浮気はしたくありません。
身体的な理由以外で拒まれてるとしたらとてもショックです。
私は主人を精神的に追い詰めてしまったのでしょうか？
どうしたら主人のプライドを害さず話合えると思われますか？