じっと見つめるときに眉間にしわをよせます

生まれたときから眉間にしわを寄せていたのであれば、癖だろうと思います。追視などが始まり、視力が発達するころから眉間にしわを寄せるようになった場合、癖のほかに視力の問題も関係しているかもしれません。
また赤ちゃんは、生後間もなくから人の表情のまねをする能力を持っています。赤ちゃんが静かに目覚めていて、授乳するくらいの距離で目の前のお母さんをまっすぐに見つめたときに、お母さんが舌と突き出すと、赤ちゃんもまねをして自分の舌を出します。口を開けると口を開け、口をすぼめるとすぼめます。赤ちゃんが眉間にしわを寄せているのを見て、お母さんが「困ったわ」としかめっ面をしていると、赤ちゃんもしかめっ面の顔まねをします。
ご質問では、既に赤ちゃんに笑顔で話しかけていらっしゃるようですね。これからもぜひ笑顔も含めて、さまざまな表情をお子さんに見せてあげてください。きっと表情の豊かなお子さんに育つと思います。