早く返事をしていれば

私３２歳、独身です。
２週間ほど前に課長の家に話があると招かれました。
それまでに何度か食事をしに行っていたのですが、、
課長は４７歳、奥様は４５歳、子供は東京の大学に行っていて今は二人暮らしなんです。
食事が終わって私が何の話なんですかと尋ねると、課長が奥さんを呼ばれ私と課長夫婦との話になりました。
「単刀直入に言う。私の家内を週に１回抱いてほしい。」
話を聞くと課長と奥さんは２年ほどセックスレスのようなんです。
課長になって上からは抑えられ下からは突き上げられ、気を使ってだんだん起つ物も起たなくなってきたそうです。
最近では夫婦の営みをしていても奥さんをバイブでいかせるだけで常に浮気の心配をしているそうです。
「知らない男に家内を抱かせるなら、信頼している武田、お前がいいと思ってな。」そう言ってくださいました。
奥様は４５歳、一回り下の私から見ても美人でスタイルもいいんです。
笑顔も素敵でどちらかというと美人というよりかわいいタイプなんです。
私の前でも下を向き緊張しているようでした。
こんな素晴らしい奥様を週に１度抱けるとはと思うと願ったりです。
すぐに返事をしたのでは私がガツガツしていると思い「少し考えさせてください。」と言ってその場は帰りました。
しかし、２週間経った今でも課長は私の返事を聞いてこないんです。
私が嫌だと思っているのでしょうか。
私の方から（奥様を抱く件）と言って課長に話をすることもできないし、奥様を思い出しながら自分で慰めています。
どうやって話を続ければいいでしょうか。