ひめタンさん、こんにちは。まずは「ストレスで性欲がなくなると精子は減るのか?」ということからお答えします。
近年、仕事や人間関係などのストレスで、性欲の減退やED(勃起不全)を訴える男性は増加しています。
男性の場合、過度なストレスを受けると、男性ホルモンの「テストステロン」の分泌が低下して、性欲の減退、勃起不全、精子数の減少、精子の運動率の低下などを招き、男性不妊につながってしまうことがあるのです。

また、女性側に原因があるケースとして、子宮内膜症が指摘されており、不妊の原因の約半数を占めているともいわれています。
ひめタンさんご夫婦は、どちらも心当りがあり、不妊治療を考えられたのかもしれませんね。
不妊の治療を始めるにあたっては、まずはあなたとご主人の体の状態を把握することが大切でしょう。
ご主人の場合は、精液を検査して、精子数、精子の運動率、奇形率などを調べます。
精液の状態は体調などによっても変化するので、だいたい2〜3回検査して判断します。
検査は泌尿器科を受診して受けるとよいでしょう。
ひめタンさんの場合は、子宮内膜症について、超音波検査や血液検査などで現状を把握し、場合によっては卵管が詰まっていないかどうか調べる「子宮卵管造影」検査が必要なこともあります。
このように男性側･女性側双方に不妊の原因になる要素がないかを調べるとよいでしょう。

しかし、お二人の場合は、性交渉の回数が少ないことが一番のネックだと思われます。
排卵の時期を狙って性交渉をしても、妊娠する確率はだいたい20%程度といわれていますから、夜の生活が月1くらいだと、受精→妊娠につながる機会としては少ないといえます。

今最も重要なのは、ひめタンさんの子宮内膜症の状態を把握するのと同時に、性欲の減退の原因となっているご主人のストレス軽減だと思います。
ストレスの原因を突き止めて、解消することが大切です。日常生活の中でリラクゼーションができる機会を増やしてみましょう。外出で遠出してみたり、旅行などで気分転換してみても良いと思います。

ストレスや緊張から解き放たれて、充実したSEXライフが送れるようになるとよいですね。