旦那様の趣味に寛大ですか？

こんにちは。妊娠７ヶ月の妊婦です。

私の旦那は趣味のため、平日は週３日くらい帰りが２３時すぎ、週末も土日どちらかは１日中家にいません。
私自身も妊娠前は飲み会やら趣味(スポーツなので今はできない)やら自由にやっていたので、お互いバランスがとれていて良かったのですが、妊娠発覚後は家と会社の往復の毎日になり、今までと同じように趣味を続ける旦那にストレスを感じるようになりました。少しは私に遠慮して回数へらすとかしてくれてもいいのに・・・。

たぶん子供が産まれても続ける気満々です。旦那も子供を待ち望んでいたので、家にいる時は育児に協力してくれると思います。でも私からしたら、好きなことも続け、都合のいい時だけ育児も楽しもうなんてズルい！という気持ちがあって、最近では、趣味を続けたいなら子供には関わってほしくないとさえ思ってしまうほどです。
こんなことを考える私は心が狭いのでしょうか？

旦那に正直に気持ちを話してみようかとも思いましたが、お恥ずかしい話、夫婦仲は冷めているので、趣味まで禁止したら浮気でもされかねないかな、と思ったりもします。子供ができたら夫婦仲も改善されるかと期待していたのですが・・・。
半分グチですみませんが、ご意見いただければと思います。