黄体ホルモン不足の妊娠の影響は？

現在、妊娠12週です。黄体ホルモンが不足気味だったため、不妊治療を受け、HCG注射により排卵をさせました。そして、性交後の高温期に10日間、黄体ホルモン製剤の「デュファストン」を飲みました。そして、妊娠できました。妊娠4週ごろから流産予防として、再度「デュファストン」を処方されましたが、「妊娠初期にはなるべく薬を飲みたくない」という気持ちから、体温の下がった日は飲み、上がった日は飲まない、ということを繰り返していました。しかし、今になってみると、主治医の先生の指示通りきちんと飲んでいたほうがよかったかなと、少し不安になっています。黄体ホルモン不足、または黄体ホルモンの過剰摂取による、胎児への影響はありますか？ また、染色体異常とは遺伝が多いのですか？ それとも、何かの影響によるものなのでしょうか？