お父さんがロリコンじゃないからじゃない？
僕もあなたのような感覚がないから、自分も娘が小さい時に連れて行ってました。
子供が小さい頃は、男女問わずお父さんが子供お風呂に入れる家庭が多いように思います。うちもそうでした。父親がお風呂に入れてる間に、母親が炊事をするみたい感じです。
銭湯や温泉もその延長でしょう。

２番さんの続きみたいな感じになりますが、
例えば普段の育児と家事で疲れ果ててる奥さんに銭湯で一人になってリフレッシュして貰うために
子供のお守りを買って出たり、何かしらの理由で奥さんが不特定多数の人が入るお風呂やプールに入れないから父親が必然的に入れる場合もありますね。

少し前から女湯に小学生以上、若しくはそれ未満でも身長が１２２センチ以上の体格のある男の子は例え母親と一緒でも入浴禁止になってますから、いずれは女の子も男湯禁止になるのでは無いでしょうか？