外壁塗装工事中は自宅にいない方がいいですか？

もうすぐ生後1ヶ月の子を、里帰り先の実家で育てています。そろそろ自宅のアパートに戻ろうと思っていたところ、その時期からアパートの外壁塗装工事が始まるようです。
塗料は臭いが強く、有害物質も含まれているのではないかと心配です。また、塗装中は日中も日当たりが悪くなるため、部屋も寒くなるのではと思います。
子どもの健康を考えると、外壁塗装が終わるまでは帰らない方がいいでしょうか？