近親相姦　願望・苦悩

私は昨年の１１月に離婚した３６歳男です。

今日久しぶりに田舎へ里帰りします。
昨年私の離婚騒動に際して兄嫁（３６歳子２人の色白美人）が色々心配して、ただ一人味方でいてくれていたこともあり、帰郷の連絡を入れました。
すると、「明後日の夜は旦那いないけど家においで！子供も夏休みいっぱいお爺ちゃんとこ行ってるから！」と言われました。
以前「困ったことあれば何でもしてあげるから言ってね！」と言われたことを思い出し、不謹慎と思いながらも何か期待してしまう自分がいます。
旦那（兄）とは随分前から冷めてると言っていました。
これって、もし私が変な考えおこしたらどうなるものでしょうか？
やっぱり退かれてしまうのでしょうか？
どなたか善きアドバイスをください。