不妊治療の転院は慎重になるべきですか？

今年5歳になる子の母です。この子は4年間の不妊治療により授かりました。2人目が欲しくて不妊治療を再開しましたが、すでに4年経過していますが授かりません。
1人目の不妊治療から同じ病院でお世話になっているのですが、自宅からかなり遠いため、通うのが大変です。また、自宅近くにできた婦人科ができたので、そちらに変えようかと悩んでいます。
やはり経過をよく知っている今の先生の方がいいのだろうと迷いますし、長年お世話になっているのに、転院する心苦しさもあります。新しい病院ではまた一からの治療になるのだろうか、ということも不安です。不妊治療の場合、転院には慎重になるべきでしょうか？