離婚しようか迷い中

私42才妻36才で子供3年生です。妻が男と2人きりで車の中で喋ってるのを友達から聞かされました。その事を妻に言うと仕事の相談をしていたと…会社の上司みたいです。2人きりで会うのはやめろといいましたが会っている模様。
その後他の友達も食事してるとこを見たと知らされました。気付かないふりしてますが…
浮気してるなら離婚しますが子供と別れたくないし…
弁護士に一度相談にいきましたが不貞行為がなければ相手から慰謝料取れないと言われました。弁護士が言うには、自分を守る為にも証拠を掴めと言われ… 車にボイスレコーダー、GPS仕込んでいます。朝晩通勤中は上司と電話してます。仕事の話や私の愚痴など…3ヶ月毎日です。こないだとうとう朝帰りしました。たまたまGPSの電池がなくなり尾行できなかったですが、アリバイ工作を友達に頼んだメールを見ました。嫁は削除忘れていたみたいです。嫁にはまだ何も言ってないですが…ちなみに見たことないTバックが洗濯機の中にありました。

これでも不貞行為の証拠には無理でしょうか？弁護士に相談すればよいのですがなかなか時間とれないもので…詳しい方教えて下さい。相手の住所は調べ分かっています。相手からも慰謝料とりたいので乗り込みたいんですが証拠不十分でしょうか？

それと不倫してるのが会社の同僚？にばれてるみたいで『あんたら噂になってるよ。不倫なんてやめろ』って知らないアドレスから妻にメールがきてました。

妻は私が嫌がらせでしたと思っているみたいです。